Pixelworks kunngjør i6-brikken med AI-baserte visuelle forbedringer

Pixelworks er et California-basert selskap som spesialiserer seg på utvikling av videobehandlingsteknologi. I mobilindustrien er Pixelworks mest kjent for sin linje med skjermbehandlingsbrikker og programvarebasert bilde kvalitetsforbedringer, som har blitt brukt i smarttelefoner fra TCL, OnePlus, OPPO, Black Shark, HMD Global, ASUS og ZTE. I dag avduket selskapet sin nye i6-skjermprosessor, en ny brikke som bruker AI for å forbedre bildekvaliteten til mobile enheter.

Pixelworks utvikler og lisensierer to typer visuelle forbedringsteknologier: Dens programvarebaserte "Pixelworks Pro Software" og dens skjermbehandlingsbrikker. Skjermbrikkene pleide å bli markedsført under merket "Iris". For eksempel OnePlus 8 Pro og OPPO Finn X2 Pro begge har Iris 5-brikke fra Pixelworks. Dette "Iris"-merket blir nå droppet i henhold til Pixelworks nye produktportefølje. I stedet vil Pixelworks sine brikker deles mellom de nye «i»- og «X»-linjene. Det som en gang ble kalt «Iris 5» vil heretter bli kjent som X5, mens Iris 3 blir omdøpt til i3. Pixelworks sier at "X"-serien er rettet mot smarttelefoner på høyt nivå som

OnePlus 8 Pro og OPPO Finn X2 Pro og er for øyeblikket deres eneste brikke som støtter Motion Estimation/Motion Compensation (MEMC). "i"-brikker, derimot, er beregnet på lav-til-midt- og mellom-til-høy-tier-telefoner og støtter ikke MEMC. Disse skjermbehandlingsbrikkene kan pares med hvilken som helst applikasjonsprosessor (AP) siden data kommuniseres mellom brikkene via MIPI.

Pixelworks Pro Software, derimot, er programvarebasert og kjører derfor utelukkende på applikasjonsprosessoren (AP). Det betyr at Pixelworks Pro Software ikke kan gjøre så mye som de dedikerte "i"- eller "X"-skjermprosessorene, men det koster (sannsynligvis) mindre for enhetsprodusenter å implementere og sparer litt intern plass. For eksempel nye ASUS ZenFone 7-serien har Pixelworks Pro-programvare for DC-dimming og SDR til HDR oppmapping, mens OnePlus 8 Pro kombinerer X5-brikken og Pixelworks Pro-programvaren for hele spekteret av funksjoner, inkludert MEMC, ekte hudtoner, lysstyrkeutjevning, tonetilpasset skjerm og mer. Når en enhet bruker både skjermprosessoren og Pro Software-løsningen på denne måten, legger Pixelworks til en "Pro"-betegnelse. For eksempel betyr "X5 Pro"-betegnelsen at en enhet bruker både X5-skjermprosessoren og Pixelworks Pro Software. På samme måte, når en enhet bruker den nye i6-brikken og Pro Software, sies den enheten å ha Pixelworks sin "i6 Pro"-løsning.

Så hva er nytt med i6-brikken? Nøyaktig hva slags "AI Display Processing"-funksjoner tilbyr den?

Pixelworks i6 og i6 Pro

Den nye i6-skjermbehandlingsbrikken har både en bildekvalitetsmotorblokk og fuzzy logic inference-blokk – sistnevnte vises for første gang i en Pixelworks-skjermprosessor. Den uklare logiske slutningsmotoren brukes til å drive funksjoner som AI Display Processing (tilpasset optimering av visuell kvalitet), Always-on HDR (AI-assistert, sanntids SDR til HDR opp kartlegging), Picture Quality Engine (for AI-assistert lokal kontrast og skarphetsforbedringer), Auto Adaptive Display (for AI-assistert 6-modus automatisk lysstyrke og tone), hudtonenøyaktighet (registrer og beskytter hudtoner dynamisk) og mørk støyreduksjon (reduserer visuell bakgrunnsstøy dynamisk i videoer med lite lys og bilder). Den nye brikken bruker opptil 40 % mindre strøm enn forgjengeren Pixelworks i3.

Vi ba selskapet om å avklare hva slags data som informerte disse AI-algoritmene under produksjonen og hvilken familie av AI-teknikker som ble brukt. Vi var spesielt nysgjerrige på å lære mer om den AI-assisterte scenetilpasningsfunksjonen, som ble sagt å være innholdsbevisst. Er den innholdsbevisstheten basert på bildestatistikk eller den faktiske scenen? Hvis det for eksempel er en solnedgang, fungerer kartleggingen av fargestatistikken til bildet (overvekt av gul/oransje), eller noe mer komplekst som tar hensyn til innholdet (solnedgang)?

Peter Carson, visepresident for bedriftsmarkedsføring, og Vikas Dhurka, seniordirektør for produkt og strategi, fortalte oss følgende:

"... Siden de nye Pixelworks i6-seriens prosessorer primært er rettet mot telefoner på mellomhøy og høy nivå, er AI PQ [bildekvalitet]-motoren designet for å balansere ytelsesforbedring, strømeffektivitet og personalisering, og bruker en proprietær, lett slutningsblokk som forsterker vår uklare logiske IP og gjør følgende:

1. Tar innspill fra eksterne og interne kilder som omgivelseslysstyrke og fargetemperatur, skjermtype, brukerpreferanser, innhold som spilles av osv.

2. Følger de visuelle slutningsreglene basert på Pixelworks kunnskapsbase som utnytter over to tiår av erfaring, inkludert nylige innspill fra ekspertfargekunstnere og kreative i Hollywood som jobber tett med vår TrueCut plattform.

3. Justerer skjermpipelinen dynamisk for å skape en overlegen visuell opplevelse optimalisert for mobile enheter på tvers av et bredt spekter av innhold og omgivende lysforhold.

Kunnskapsbasen nevnt ovenfor (#2) oppdateres over tid ettersom vi lærer og samler inn input fra både OEM-er om brukerpreferanser og fra innholdseksperter i Hollywood. Det er viktig å merke seg at arkitekturen til PQ-blokken i Pixelworks i6-prosessoren har blitt oppgradert til en 2-lags pipeline for enda finere kontroll over behandlingen ettersom den brukes på forskjellige attributter til et bilde eller en video. Selv om denne 2-lags-funksjonen ikke er AI-spesifikk, gjør vår AI-motor det mulig å utnytte 2-lags rørledningen mer fullt ut enn med konvensjonell PQ-behandling.

Som et eksempel, med i6-prosessoren, er beslutningen for å vise solnedgang ikke bare basert på nøyaktigheten til nyansen av gult/oransje på skjermen, men er heller basert på beslutninger som vil gjøre det mulig for brukeren å se solnedgangen nøyaktig med tanke på AI-basert scenegjenkjenning/bildekomposisjon, skjermtype, omgivelseslysstyrke/fargetemperatur og mer."

Ettersom konkurransen i smarttelefonindustrien fortsetter å varmes opp, henvender flere og flere enhetsprodusenter seg til tredjepartsleverandører som Pixelworks for å differensiere produktene sine. Skjermfunksjonene som tilbys av i6-brikken kan tjene som et salgsargument for fremtidige smarttelefoner, selv om enhetsprodusenter vanligvis ikke nevner det faktiske selskapet bak disse funksjonene.

Pixelworks sier at den nye i6-brikken prøver til kunder nå og forventes å leveres i kommersielle enheter allerede i fjerde kvartal 2020.