Pixelworks tillkännager i6-chippet med AI-baserade visuella förbättringar

Pixelworks är ett Kalifornien-baserat företag som specialiserat sig på att utveckla videobehandlingsteknik. I den mobila industrin är Pixelworks mest känt för sin linje av skärmbearbetningschips och mjukvarubaserad bild kvalitetsförbättringar, som har använts i smartphones från TCL, OnePlus, OPPO, Black Shark, HMD Global, ASUS och ZTE. Idag presenterade företaget sin nya i6-displayprocessor, ett nytt chip som använder AI för att förbättra bildkvaliteten på mobila enheter.

Pixelworks utvecklar och licensierar två typer av visuella förbättringstekniker: Dess mjukvarubaserade "Pixelworks Pro Software" och dess displaybearbetningschips. Displaychipsen brukade marknadsföras under varumärket "Iris". Till exempel OnePlus 8 Pro och OPPO Find X2 Pro båda har Iris 5 chip från Pixelworks. Detta "Iris"-märke släpps nu i enlighet med Pixelworks nya produktportfölj. Istället kommer Pixelworks marker att delas mellan de nya "i"- och "X"-linjerna. Det som en gång kallades "Iris 5" kommer hädanefter att kallas X5, medan Iris 3 döps om till i3. Pixelworks säger att "X"-serien är inriktad på högklassiga smartphones som

OnePlus 8 Pro och OPPO Find X2 Pro och är för närvarande deras enda chip som stöder Motion Estimation/Motion Compensation (MEMC). "i"-seriens chips, å andra sidan, är avsedda för låg-till-medel och mellan-till-hög-tier telefoner och stöder inte MEMC. Dessa skärmbearbetningschips kan paras ihop med vilken applikationsprocessor som helst (AP) eftersom data kommuniceras mellan chipsen via MIPI.

Pixelworks Pro Software, å andra sidan, är mjukvarubaserad och körs därför helt på applikationsprocessorn (AP). Det betyder att Pixelworks Pro Software inte kan göra lika mycket som de dedikerade "i" eller "X" bildskärmsprocessorerna, men det kostar (sannolikt) mindre för enhetstillverkare att implementera och sparar lite internt utrymme. Till exempel nya ASUS ZenFone 7-serien har Pixelworks Pro Software för DC-dimming och SDR till HDR-uppmappning, medan OnePlus 8 Pro kombinerar X5-chippet och Pixelworks Pro Software för hela skalan av funktioner, inklusive MEMC, äkta hudtoner, utjämning av ljusstyrka, tonanpassningsbar display och mer. När en enhet använder både bildskärmsprocessorn och Pro Software-lösningen på detta sätt, lägger Pixelworks till en "Pro"-beteckning. Till exempel betyder "X5 Pro"-beteckningen att en enhet använder både X5-skärmprocessorn och Pixelworks Pro Software. På samma sätt, när en enhet använder det nya i6-chippet och Pro Software, sägs den enheten ha Pixelworks "i6 Pro"-lösning.

Så vad är nytt med i6-chippet? Exakt vilka typer av "AI Display Processing"-funktioner erbjuder den?

Pixelworks i6 och i6 Pro

Det nya i6-bildskärmsbearbetningschipet har både ett bildkvalitetsmotorblock och ett fuzzy logic-inferensblock – det senare visas för första gången i en Pixelworks-displayprocessor. Den suddiga logiska slutledningsmotorn används för att driva funktioner som AI Display Processing (adaptivt optimerar visuell kvalitet), Always-on HDR (AI-assisterad, realtids-SDR till HDR-mappning), Picture Quality Engine (för AI-stödd lokal kontrast och skärpa), Auto Adaptive Display (för AI-assisterad 6-läges automatisk ljusstyrka och ton), hudtonsnoggrannhet (upptäcker dynamiskt och skyddar hudtoner) och mörkbrusreducering (minskar dynamiskt visuellt bakgrundsljud i videor med svagt ljus och foton). Det nya chippet förbrukar upp till 40 % mindre ström än sin föregångare, Pixelworks i3.

Vi bad företaget att klargöra vilken typ av data som informerade dessa AI-algoritmer under produktionen och vilken familj av AI-tekniker som användes. Vi var särskilt nyfikna på att lära oss mer om den AI-assisterade scenanpassningsfunktionen, som sades vara innehållsmedveten. Är denna innehållsmedvetenhet baserad på bildstatistik eller den faktiska scenen? Till exempel, om det är en solnedgång, fungerar kartläggningen av bildens färgstatistik (övervikten av gul/orange), eller något mer komplext som tar hänsyn till innehållet (solnedgång)?

Peter Carson, Vice President för företagsmarknadsföring, och Vikas Dhurka, Senior Director of Product and Strategy, berättade följande:

"...eftersom de nya Pixelworks i6-seriens processorer främst är inriktade på telefoner på mellanhög och hög nivå, är AI PQ-motorn [bildkvalitet] utformad för att balansera prestandaförbättring, energieffektivitet och personalisering, och använder ett egenutvecklat, lätt slutledningsblock som förstärker vår fuzzy logic IP och gör följande:

1. Tar indata från externa och interna källor som omgivande ljusstyrka och färgtemperatur, skärmtyp, användarpreferenser, innehåll som spelas upp, etc.

2. Följer de visuella slutledningsreglerna baserade på Pixelworks kunskapsbas som utnyttjar över två decennier av erfarenhet, inklusive senaste input från experter på färgläggare och kreativa i Hollywood som arbetar nära vår TrueCut plattform.

3. Justerar dynamiskt displaypipeline för att skapa en överlägsen visuell upplevelse optimerad för mobila enheter över ett brett utbud av innehåll och omgivande ljusförhållanden.

Kunskapsbasen som nämns ovan (#2) uppdateras över tid när vi lär oss och samlar in input från både OEM: er om användarpreferenser och från innehållsproffs i Hollywood. Det är viktigt att notera att arkitekturen för PQ-blocket i Pixelworks i6-processorn har uppgraderats till en 2-lagers pipeline för ännu finare kontroll av bearbetningen eftersom den appliceras på olika attribut för en bild eller video. Även om denna 2-lagers förmåga inte är AI-specifik, tillåter vår AI-motor att 2-lagers pipeline kan utnyttjas mer fullt ut än med konventionell PQ-bearbetning.

Som ett exempel, med i6-processorn, är beslutet för att visa solnedgången inte bara baserat på noggrannheten av nyansen av gult/orange på skärmen utan snarare baserat på beslut som skulle göra det möjligt för användaren att se solnedgången exakt med hänsyn till AI-baserad scendetektering/bildkomposition, visningstyp, omgivande ljusstyrka/färgtemperatur och Mer."

När konkurrensen inom smartphoneindustrin fortsätter att hårdna, vänder sig fler och fler enhetstillverkare till tredjepartsleverantörer som Pixelworks för att differentiera sina produkter. Displayfunktionerna som erbjuds av i6-chippet kan fungera som ett försäljningsargument för framtida smartphones, även om enhetstillverkare vanligtvis inte nämner det faktiska företaget bakom dessa funktioner.

Pixelworks säger att dess nya i6-chip provtas till kunder nu och förväntas levereras i kommersiella enheter redan under fjärde kvartalet 2020.