Pixelworks, каліфорнійська компанія, яка займається розробкою чіпів для процесорів дисплеїв, анонсувала i6 із візуальними вдосконаленнями на основі штучного інтелекту.
Pixelworks — каліфорнійська компанія, яка спеціалізується на розробці технологій обробки відео. У мобільній індустрії Pixelworks найбільш відома своєю лінійкою чіпів для обробки дисплеїв і програмного забезпечення зображення покращення якості, які використовувалися в смартфонах TCL, OnePlus, OPPO, Black Shark, HMD Global, ASUS і ZTE. Сьогодні компанія представила свій новий дисплейний процесор i6, новий чіп, який використовує ШІ для покращення якості зображення на мобільних пристроях.
Pixelworks розробляє та ліцензує два типи технологій візуального покращення: програмне забезпечення "Pixelworks Pro Software" та чіпи обробки відображення. Дисплейні чіпи раніше продавалися під брендом «Iris». Наприклад, OnePlus 8 Pro і OPPO Find X2 Pro обидві функції Мікросхема Iris 5 від Pixelworks. Однак цей бренд «Iris» припиняється відповідно до портфоліо нових продуктів Pixelworks. Натомість мікросхеми Pixelworks будуть розділені між новими лініями «i» та «X». Те, що колись називалося «Iris 5», відтепер називатиметься X5, тоді як Iris 3 буде перейменовано на i3. Pixelworks каже, що серія «X» призначена для смартфонів високого рівня, таких як
OnePlus 8 Pro і OPPO Find X2 Pro і на даний момент є їхнім єдиним чіпом, який підтримує оцінку руху/компенсацію руху (MEMC). Мікросхеми серії "i", з іншого боку, призначені для телефонів низького та середнього та середнього та високого рівнів і не підтримують MEMC. Ці чіпи обробки відображення можуть бути з’єднані з будь-яким прикладним процесором (AP), оскільки дані передаються між чіпами через MIPI.Програмне забезпечення Pixelworks Pro, з іншого боку, є програмним забезпеченням і, отже, працює повністю на процесорі програм (AP). Це означає, що програмне забезпечення Pixelworks Pro не може зробити стільки ж, скільки спеціалізовані процесори дисплеїв «i» або «X», але воно (імовірно) обходиться дешевше для виробників пристроїв і заощаджує трохи внутрішнього простору. Наприклад, нова серія ASUS ZenFone 7 містить програмне забезпечення Pixelworks Pro для затемнення постійного струму та перетворення SDR на HDR, тоді як OnePlus 8 Pro поєднує чіп X5 і програмне забезпечення Pixelworks Pro для повного спектру функцій, включаючи MEMC, справжні тілесні відтінки, згладжування яскравості, адаптивний дисплей тощо. Коли в пристрої таким чином використовуються і процесор дисплея, і програмне забезпечення Pro, Pixelworks додає позначення «Pro». Наприклад, позначення «X5 Pro» означає, що пристрій використовує як процесор дисплея X5, так і програмне забезпечення Pixelworks Pro. Подібним чином, коли пристрій використовує новий чіп i6 і програмне забезпечення Pro, цей пристрій, як кажуть, має рішення "i6 Pro" від Pixelworks.
Отже, що нового в чіпі i6? Які саме функції «обробки дисплея AI» він пропонує?
Pixelworks i6 та i6 Pro
Новий чіп обробки дисплея i6 має як блок механізму якості зображення, так і блок нечіткої логіки — останній з’являється вперше в процесорі дисплея Pixelworks. Механізм нечіткої логіки використовується для забезпечення таких функцій, як AI Display Processing (адаптивна оптимізація якості зображення), Always-on HDR (за допомогою AI, SDR у реальному часі для HDR up mapping), Picture Quality Engine (для покращення локального контрасту та різкості за допомогою AI), Auto Adaptive Display (для 6-режимної автоматичної яскравості та яскравості за допомогою AI). тон), точність відтінку шкіри (динамічно визначає та захищає відтінки шкіри) і придушення темного шуму (динамічно зменшує візуальний фоновий шум у відео зі слабким освітленням і фотографії). Новий чіп споживає на 40% менше енергії, ніж його попередник Pixelworks i3.
Ми попросили компанію пояснити, які дані використовували ці алгоритми штучного інтелекту під час виробництва та яку групу методів штучного інтелекту було використано. Нам було особливо цікаво дізнатися більше про функцію адаптації сцени за допомогою штучного інтелекту, яка, як кажуть, залежить від вмісту. Це усвідомлення вмісту базується на статистиці зображень чи фактичній сцені? Наприклад, якщо є захід сонця, чи працює відображення вгору на статистиці кольорів зображення (переважання жовтого/помаранчевого), або щось складніше, що враховує зміст (захід сонця)?
Пітер Карсон, віце-президент із корпоративного маркетингу, та Вікас Дхурка, старший директор із продуктів і стратегії, розповіли нам наступне:
«...оскільки нові процесори серії Pixelworks i6 орієнтовані насамперед на телефони середнього та високого рівнів, механізм AI PQ [якість зображення] розроблений для балансування покращення продуктивності, енергоефективності та персоналізації, а також використовує власний, легкий блок висновку, який доповнює нашу нечітку логіку IP і виконує наступне:
Отримує вхідні дані із зовнішніх і внутрішніх джерел, як-от яскравість навколишнього середовища та колірна температура, тип дисплея, налаштування користувача, вміст, що відтворюється, тощо.
Дотримується правил візуального висновку, заснованих на базі знань Pixelworks, яка використовує понад два десятиліття досвіду, включаючи нещодавні внески експертів-колористів і креативників із Голлівуду, які тісно співпрацюють із нашим TrueCut платформа.
Динамічно налаштовує конвеєр відображення, щоб створити чудовий візуальний досвід, оптимізований для мобільних пристроїв у широкому спектрі вмісту та умов навколишнього освітлення.
База знань, згадана вище (№2), оновлюється з часом, оскільки ми дізнаємось і збираємо дані як від виробників оригінального обладнання щодо вподобань користувачів, так і від професіоналів із контенту в Голлівуді. Важливо відзначити, що архітектуру блоку PQ в процесорі Pixelworks i6 було оновлено до Двошаровий конвеєр для ще більш точного керування обробкою, що застосовується до різних атрибутів зображення чи відео. Хоча ця 2-рівнева здатність не є специфічною для штучного інтелекту, наш механізм штучного інтелекту дозволяє більш повно використовувати двошаровий конвеєр, ніж зі звичайною обробкою PQ.
Наприклад, для процесора i6 рішення про відображення заходу сонця ґрунтується не лише на точності відтінку жовтого/помаранчевого на дисплеї, а скоріше на основі рішення, які дозволять користувачеві точно побачити захід сонця, враховуючи визначення сцени/композицію зображення на основі штучного інтелекту, тип дисплея, яскравість навколишнього середовища/кольорову температуру та більше».
Оскільки конкуренція в індустрії смартфонів продовжує загострюватися, все більше виробників пристроїв звертаються до сторонніх постачальників, таких як Pixelworks, щоб виділити свої продукти. Функції дисплея, пропоновані чіпом i6, можуть слугувати перевагою для майбутніх смартфонів, хоча виробники пристроїв зазвичай не згадують фактичну компанію, що стоїть за цими функціями.
Pixelworks каже, що її новий чіп i6 зараз тестується для клієнтів і, як очікується, буде поставлятися на комерційні пристрої вже в 4 кварталі 2020 року.