Pixelworks annoncerer i6-chippen med AI-baserede visuelle forbedringer

Pixelworks er et Californien-baseret firma, der har specialiseret sig i at udvikle videobehandlingsteknologi. I mobilindustrien er Pixelworks bedst kendt for sin linje af skærmbehandlingschips og softwarebaserede billeder kvalitetsforbedringer, som er blevet brugt i smartphones fra TCL, OnePlus, OPPO, Black Shark, HMD Global, ASUS og ZTE. I dag afslørede virksomheden sin nye i6-skærmprocessor, en ny chip, der bruger AI til at forbedre billedkvaliteten på mobile enheder.

Pixelworks udvikler og licenserer to slags visuelle forbedringsteknologier: Dets softwarebaserede "Pixelworks Pro Software" og dets skærmbehandlingschips. Displaychipsene blev tidligere markedsført under mærket "Iris". For eksempel OnePlus 8 Pro og OPPO Find X2 Pro begge har Iris 5 chip fra Pixelworks. Dette "Iris"-mærke bliver nu droppet i overensstemmelse med Pixelworks nye produktportefølje. I stedet vil Pixelworks chips blive delt mellem de nye "i" og "X" linjer. Det, der engang blev kaldt "Iris 5", vil fremover blive kendt som X5, mens Iris 3 bliver omdøbt til i3. Pixelworks siger, at "X"-serien er rettet mod smartphones på højt niveau som f.eks

OnePlus 8 Pro og OPPO Find X2 Pro og er i øjeblikket deres eneste chip til at understøtte Motion Estimation/Motion Compensation (MEMC). "i"-seriens chips er på den anden side beregnet til lav-til-midt og mellem-til-høj-tier telefoner og understøtter ikke MEMC. Disse skærmbehandlingschips kan parres med enhver applikationsprocessor (AP), da data kommunikeres mellem chipsene via MIPI.

Pixelworks Pro Software er på den anden side softwarebaseret og kører derfor udelukkende på applikationsprocessoren (AP). Det betyder, at Pixelworks Pro Software ikke kan gøre så meget som de dedikerede "i" eller "X" skærmprocessorer, men det koster (sandsynligvis) mindre for enhedsproducenter at implementere og sparer en smule intern plads. For eksempel nye ASUS ZenFone 7-serie indeholder Pixelworks Pro-software til DC-dæmpning og SDR til HDR-upmapping, mens den OnePlus 8 Pro kombinerer X5-chippen og Pixelworks Pro-softwaren til det fulde spektrum af funktioner, inklusive MEMC, ægte hudtoner, udjævning af lysstyrke, toneadaptiv skærm og mere. Når en enhed anvender både skærmprocessoren og Pro Software-løsningen på denne måde, tilføjer Pixelworks en "Pro"-betegnelse. For eksempel betyder "X5 Pro"-betegnelsen, at en enhed bruger både X5-skærmprocessoren og Pixelworks Pro Software. Ligeledes, når en enhed bruger den nye i6-chip og Pro Software, siges den enhed at have Pixelworks "i6 Pro" løsning.

Så hvad er nyt ved i6-chippen? Præcis hvilke slags "AI Display Processing"-funktioner tilbyder den?

Pixelworks i6 og i6 Pro

Den nye i6-skærmbehandlingschip har både en billedkvalitetsmotorblok og fuzzy logic inference-blok - sidstnævnte vises for første gang i en Pixelworks-skærmprocessor. Den fuzzy logic inference engine bruges til at drive funktioner som AI Display Processing (tilpasset optimering af visuel kvalitet), Always-on HDR (AI-assisteret, real-time SDR til HDR up-mapping), Picture Quality Engine (til AI-assisteret lokal kontrast og skarphedsforbedringer), Auto Adaptive Display (til AI-assisteret 6-modes automatisk lysstyrke og tone), hudtonenøjagtighed (registrer og beskyt hudtoner dynamisk) og mørk støjdæmpning (reducerer dynamisk baggrundsstøj i videoer med svagt lys og fotos). Den nye chip bruger op til 40 % mindre strøm end sin forgænger, Pixelworks i3.

Vi bad virksomheden om at afklare, hvilken slags data, der informerede disse AI-algoritmer under produktionen, og hvilken familie af AI-teknikker, der blev anvendt. Vi var især nysgerrige efter at lære mere om den AI-assisterede scenetilpasningsfunktion, som siges at være indholdsbevidst. Er den indholdsbevidsthed baseret på billedstatistikker eller den faktiske scene? Hvis der f.eks. er en solnedgang, fungerer kortlægningen op af billedets farvestatistikker (overvægten af ​​gul/orange), eller noget mere komplekst, der tager højde for indholdet (solnedgang)?

Peter Carson, Vice President for Corporate Marketing, og Vikas Dhurka, Senior Director of Product and Strategy, fortalte os følgende:

"...da de nye Pixelworks i6-seriens processorer primært er målrettet mod mellemhøje og høje telefoner, er AI PQ [billedkvalitet]-motoren designet til at balancere ydeevneforbedring, strømeffektivitet og personalisering og bruger en proprietær, let inferencing-blok, der øger vores fuzzy logic IP og gør følge:

1. Tager input fra eksterne og interne kilder som omgivende lysstyrke og farvetemperatur, skærmtype, brugerpræferencer, indhold, der afspilles osv.

2. Følger de visuelle inferencing-regler baseret på Pixelworks videnbase, der udnytter over to årtier af erfaring, herunder nylige input fra ekspertfarvere og kreative i Hollywood, der arbejder tæt sammen med vores TrueCut platform.

3. Justerer displaypipelinen dynamisk for at skabe en overlegen visuel oplevelse, der er optimeret til mobile enheder på tværs af en bred vifte af indhold og omgivende lysforhold.

Den ovennævnte videnbase (#2) opdateres over tid, efterhånden som vi lærer og indsamler input fra både OEM'er om brugerpræferencer og fra indholdsprofessionelle i Hollywood. Det er vigtigt at bemærke, at arkitekturen af ​​PQ-blokken i Pixelworks i6-processoren er blevet opgraderet til en 2-lags pipeline for endnu finere kontrol af behandlingen, da den anvendes på forskellige attributter af et billede eller en video. Selvom denne 2-lags-kapacitet ikke er AI-specifik, gør vores AI-motor det muligt at udnytte 2-lags pipeline mere fuldt ud end med konventionel PQ-behandling.

Som et eksempel, med i6-processoren er beslutningen om at vise solnedgang ikke kun baseret på nøjagtigheden af ​​nuancen af ​​gul/orange på skærmen, men er snarere baseret på beslutninger, der gør det muligt for brugeren at se solnedgangen nøjagtigt under hensyntagen til AI-baseret scenegenkendelse/billedsammensætning, visningstype, omgivende lysstyrke/farvetemperatur og mere."

Efterhånden som konkurrencen i smartphone-industrien bliver ved med at spidse til, henvender flere og flere enhedsproducenter sig til tredjepartsleverandører som Pixelworks for at differentiere deres produkter. Displayfunktionerne, der tilbydes af i6-chippen, kunne tjene som salgsargument for fremtidige smartphones, selvom enhedsproducenter typisk ikke nævner det faktiske firma bag disse funktioner.

Pixelworks siger, at dens nye i6-chip prøver til kunder nu og forventes at blive leveret i kommercielle enheder allerede i Q4 2020.