Qualcomm Spectra 380 делает огромный шаг вперед в области вычислительной фотографии и искусственного интеллекта камеры. Прочтите все о масштабных улучшениях, которые ждут вас в этом году!
Вчера на Гавайях на технологическом саммите Snapdragon состоялся долгожданный Qualcomm Snapdragon 855 был запущен. Хотя новый чип вносит различные существенные изменения (от значительно более точного GPS до первой новой версии Wi-Fi 2,4 ГГц в десятилетие, до сотовой связи 5G), дискуссия продолжает возвращаться к визуализации и огромным улучшениям, которые Qualcomm Spectra 380 приносит.
Традиционно интернет-провайдер камеры занимался преобразованием необработанных цветных выходных данных камеры во что-то, что остальная часть телефон можно использовать для машинного зрения, но поскольку обработка ИИ стала более сложной, интеграция со специализированным оборудованием стала критический. Qualcomm сделала первые шаги в этом направлении со своей Квалкомм Спектра 280, включив поддержку многокадрового шумоподавления и определения глубины прямо в интернет-провайдер, но впереди еще был долгий путь. В этом году Qualcomm делает этот скачок, встраивая аппаратное ускорение компьютерного зрения прямо в Qualcomm Spectra 380 ISP и создавая то, что они называют первым в мире CV-ISP.
Qualcomm Spectra 380 устранит узкие места в конвейере обработки изображений и приведет к четырехкратной экономии энергии по сравнению с предыдущими поколениями за счет применения машинного зрения. обработка прямо на самом интернет-провайдере, устраняя необходимость пробуждения процессора, графического процессора и HSP для сложных задач искусственного интеллекта в фотографии, а также значительно улучшая AR процессора. возможности.
Это означает, что аппаратное определение глубины, классификация и сегментация объектов могут выполняться в режиме реального времени с разрешением до 4K HDR 60 Гц на Qualcomm Snapdragon 855. Это даст нам замену живых объектов или фона в видео в реальном времени, открывая новые возможности для приложения расширенной реальности (XR) с чипсетом Qualcomm Snapdragon 855 как в телефонах, так и в AR гарнитуры.
Однако улучшения Qualcomm Spectra 380 не ограничиваются искусственным интеллектом и дополненной реальностью. Qualcomm приложила немало усилий для улучшения цветового пространства и яркости, добавив поддержку записи видео в формате HDR10+. можно записывать видео с большим динамическим диапазоном и более широким цветовым пространством, чтобы в полной мере использовать возможности современных телефонов и телевизоры.
Новый интернет-провайдер также обеспечивает улучшенное аппаратное ускорение для видео VP9 и формата изображений HEIF на основе HEVC, которые могут быть на 50 % меньше. чем старые форматы изображений, и обеспечивает расширенную функциональность (хотя мы с нетерпением ожидаем добавления аппаратного ускорения для тот АВ1 на базе AVIF, который, мы надеемся, будет доступен в будущем)
Qualcomm Spectra 380 также сможет обрабатывать изображения с более высоким разрешением, чем предыдущие годы, благодаря двойному 14-битному процессору. Конвейер CV-ISP поддерживает одновременную съемку с разрешением 22 МП, частотой 30 Гц на две камеры и съемку с разрешением 48 МП, частотой 30 Гц, одним изображением. датчик. Однако в этом случае более быстрый конвейер чтения с датчика не преобразуется в видео. Qualcomm Spectra 380 поддерживает то же собственное разрешение 720p 480 Гц (без использования встроенного кэша), что и Spectra. 280 это сделали.
Но самое приятное то, что Qualcomm Spectra 380 может продолжать совершенствоваться в будущем, поскольку его новый модульный дизайн интернет-провайдера открывает новые возможности. гибкость конвейера обработки изображений, открывающая возможности для различных методов обработки пикселей RAW и YUV. домены.
Вы в восторге от расширенных функций искусственного интеллекта в камерах? Для чего вы надеетесь использовать машинное зрение? Расскажите нам в комментариях ниже!