Pixelworks, spoločnosť so sídlom v Kalifornii, ktorá navrhuje čipy procesorov displeja, oznámila i6 s vizuálnymi vylepšeniami založenými na AI.
Pixelworks je spoločnosť so sídlom v Kalifornii, ktorá sa špecializuje na vývoj technológie spracovania videa. V mobilnom priemysle je Pixelworks najlepšie známy pre svoju líniu čipov na spracovanie displeja a softvérový obraz vylepšenia kvality, ktoré boli použité v smartfónoch od TCL, OnePlus, OPPO, Black Shark, HMD Global, ASUS a ZTE. Spoločnosť dnes predstavila svoj nový zobrazovací procesor i6, nový čip, ktorý využíva AI na zlepšenie kvality obrazu mobilných zariadení.
Pixelworks vyvíja a licencuje dva druhy vizuálnych vylepšení: svoj softvérový softvér „Pixelworks Pro Software“ a jeho čipy na spracovanie displeja. Zobrazovacie čipy sa kedysi predávali pod značkou „Iris“. Napríklad, OnePlus 8 Pro a OPPO Find X2 Pro obe funkcie Čip Iris 5 od spoločnosti Pixelworks. V súlade s novým produktovým portfóliom Pixelworks sa však od tejto značky „Iris“ teraz upúšťa. Namiesto toho budú čipy Pixelworks rozdelené medzi nové línie „i“ a „X“. To, čo sa kedysi nazývalo „Iris 5“, bude odteraz známe ako X5, zatiaľ čo Iris 3 sa premenuje na i3. Pixelworks hovorí, že séria „X“ je zameraná na smartfóny vyššej kategórie, ako je napr
OnePlus 8 Pro a OPPO Find X2 Pro a v súčasnosti je ich jediným čipom, ktorý podporuje odhad pohybu/kompenzáciu pohybu (MEMC). Čipy série „i“ sú na druhej strane určené pre telefóny nižšej až strednej a strednej až vyššej úrovne a nepodporujú MEMC. Tieto čipy na spracovanie displeja môžu byť spárované s akýmkoľvek aplikačným procesorom (AP), pretože dáta sa medzi čipmi komunikujú cez MIPI.Na druhej strane Pixelworks Pro Software je založený na softvéri, a preto beží výlučne na aplikačnom procesore (AP). To znamená, že softvér Pixelworks Pro nedokáže urobiť toľko ako vyhradené zobrazovacie procesory „i“ alebo „X“, ale implementácia (pravdepodobne) stojí výrobcov zariadení menej a šetrí trochu vnútorného priestoru. Napríklad, nový rad ASUS ZenFone 7 obsahuje softvér Pixelworks Pro pre DC Dimming a SDR na HDR upmapping, zatiaľ čo OnePlus 8 Pro kombinuje čip X5 a softvér Pixelworks Pro pre celú škálu funkcií vrátane MEMC, skutočných pleťových tónov, vyhladzovania jasu, displeja prispôsobujúceho tóny a ďalších. Keď zariadenie týmto spôsobom využíva zobrazovací procesor aj riešenie Pro Software, Pixelworks pridá označenie „Pro“. Napríklad označenie „X5 Pro“ znamená, že zariadenie používa zobrazovací procesor X5 aj softvér Pixelworks Pro. Podobne, keď zariadenie používa nový čip i6 a softvér Pro, uvádza sa, že toto zariadenie obsahuje riešenie Pixelworks „i6 Pro“.
Čo je teda nové na čipe i6? Aké druhy funkcií „AI Display Processing“ presne ponúka?
Pixelworks i6 a i6 Pro
Nový čip na spracovanie displeja i6 má motorový blok kvality obrazu aj inferenčný blok fuzzy logiky – ten druhý sa objavuje po prvýkrát v zobrazovacom procesore Pixelworks. Inferenčný modul fuzzy logiky sa používa na podporu funkcií, ako je AI Display Processing (adaptívna optimalizácia vizuálnej kvality), Always-on HDR (Asistované AI, SDR v reálnom čase HDR up mapping), Picture Quality Engine (pre miestne vylepšenie kontrastu a ostrosti s pomocou AI), Auto Adaptive Display (pre 6-režimový automatický jas s podporou AI a tón), Skin Tone Accuracy (dynamicky zisťuje a chráni tóny pleti) a Dark Noise Suppression (dynamicky znižuje vizuálny šum na pozadí pri videách so slabým osvetlením a fotografie). Nový čip spotrebuje až o 40 % menej energie ako jeho predchodca Pixelworks i3.
Požiadali sme spoločnosť, aby objasnila, aké údaje informovali tieto algoritmy AI počas výroby a aká skupina techník AI bola použitá. Boli sme obzvlášť zvedaví, keď sme sa dozvedeli viac o funkcii prispôsobenia scény pomocou AI, o ktorej sa hovorilo, že zohľadňuje obsah. Je toto povedomie o obsahu založené na štatistike obrazu alebo na skutočnej scéne? Napríklad, ak je západ slnka, funguje mapovanie nahor od štatistík farieb obrázka (prevaha žltej/oranžovej), alebo niečo zložitejšie, čo zohľadňuje obsah (západ slnka)?
Peter Carson, viceprezident pre firemný marketing, a Vikas Dhurka, vrchný riaditeľ pre produkt a stratégiu, nám povedali nasledovné:
„...keďže nové procesory Pixelworks série i6 sú zamerané predovšetkým na telefóny strednej a vyššej triedy, motor AI PQ [kvalita obrazu] je navrhnutý tak, aby vyvážil zlepšenie výkonu, energetickú účinnosť a personalizáciu a využíva vlastný, ľahký blok inferencovania, ktorý rozširuje našu fuzzy logickú IP a robí nasledujúce:
Preberá vstupy z externých a interných zdrojov, ako je okolitý jas a teplota farieb, typ displeja, používateľské preferencie, prehrávaný obsah atď.
Dodržiava pravidlá vizuálneho odvodzovania založené na znalostnej báze Pixelworks, ktorá využíva viac ako dve desaťročia skúsenosti, vrátane nedávnych vstupov od expertných koloristov a kreatívcov z Hollywoodu, ktorí úzko spolupracujú s naším TrueCut plošina.
Dynamicky prispôsobuje zobrazovaciu linku tak, aby vytvorila vynikajúci vizuálny zážitok optimalizovaný pre mobilné zariadenia v rámci širokej škály obsahu a okolitých svetelných podmienok.
Vyššie uvedená vedomostná základňa (#2) sa v priebehu času aktualizuje, keď sa učíme a zhromažďujeme vstupy od výrobcov OEM o preferenciách používateľov a od profesionálov v oblasti obsahu v Hollywoode. Je dôležité poznamenať, že architektúra bloku PQ v procesore Pixelworks i6 bola inovovaná na a 2-vrstvové potrubie pre ešte jemnejšiu kontrolu spracovania, pretože sa aplikuje na rôzne atribúty obrázka alebo videa. Aj keď táto 2-vrstvová schopnosť nie je špecifická pre AI, náš AI engine umožňuje 2-vrstvové potrubie lepšie využiť ako pri bežnom PQ spracovaní.
Napríklad s procesorom i6 sa rozhodnutie o zobrazení západu slnka nezakladá len na presnosti odtieňa žltej/oranžovej na displeji, ale skôr na rozhodnutia, ktoré by používateľovi umožnili presne vidieť západ slnka s ohľadom na detekciu scény/zloženie obrazu, typ zobrazenia, okolitý jas/teplotu farieb a viac."
Keďže konkurencia v odvetví smartfónov sa neustále zahrieva, stále viac výrobcov zariadení sa obracia na predajcov tretích strán, ako je Pixelworks, aby odlíšili svoje produkty. Funkcie displeja, ktoré ponúka čip i6, by mohli slúžiť ako predajný bod pre budúce smartfóny, hoci výrobcovia zariadení zvyčajne nespomínajú skutočnú spoločnosť za týmito funkciami.
Pixelworks tvrdí, že jeho nový čip i6 je teraz vzorkovaný pre zákazníkov a očakáva sa, že sa do komerčných zariadení dostane už v štvrtom štvrťroku 2020.