Лансиран Куалцомм Спецтра 380: први светски ИСП са интегрисаном вештачком интелигенцијом

Куалцомм Спецтра 380 прави огроман корак напред у компјутерској фотографији и АИ камери. Прочитајте све о огромним побољшањима која долазе ове године!

Јуче на Хавајима на Снапдрагон технолошком самиту, дуго очекиваном Куалцомм Снапдрагон 855 је лансиран. Док нови чип доноси различите суштинске промене (од знатно прецизнијег ГПС-а до прве нове ВиФи верзије од 2,4 ГХз у деценије, до 5Г ћелијске повезаности), дискусија се стално враћа на слике и огромна побољшања која Куалцомм Спецтра 380 доноси.

Традиционално би ИСП камере радио на трансформацији сирових излазних боја камере у нешто што остатак телефон може да користи за машински вид, али како је обрада вештачке интелигенције постала сложенија, интеграција са специјализованим хардвером је постала критичан. Куалцомм је направио прве кораке ка томе са својим Куалцомм Спецтра 280, подршка за печење за смањење шума у ​​више фрејмова и детекцију дубине директно у ИСП-у, али је још био дуг пут до тога. Ове године Куалцомм прави тај скок, уграђујући хардверско убрзање компјутерског вида директно у Куалцомм Спецтра 380 ИСП и стварајући оно што називају првим ЦВ-ИСП-ом на свету.

Куалцомм Спецтра 380 ће уклонити уска грла у процесу обраде слике и резултирати до 4к уштеде енергије у односу на претходне генерације коришћењем машинског вида обрада директно на самом ИСП-у, уклањајући потребу за буђењем ЦПУ, ГПУ и ХСП за сложене АИ задатке фотографисања и значајно побољшавајући АР процесора способности.

То значи да се хардверско испитивање дубине, класификација објеката и сегментација објеката могу десити у реалном времену до 4к ХДР 60Хз на Куалцомм Снапдрагон 855. Ово ће нам дати замену живог објекта или позадине у видеу у реалном времену, отварајући нове могућности за апликације проширене стварности (КСР) са Куалцомм Снапдрагон 855 чипсетом и у телефонима и у АР-у слушалице.

Побољшања за Куалцомм Спецтра 380 се ипак не заустављају на АИ и АР. Куалцомм је уложио много посла у побољшање простора боја и осветљености, додајући подршку за потпуно ХДР10+ снимање видео записа, што га чини могуће је снимати видео записе са већим динамичким опсегом и ширим простором боја, како би се у потпуности искористиле могућности модерних телефона и телевизори.

Нови ИСП такође доноси побољшано хардверско убрзање за ВП9 видео и за ХЕВЦ заснован ХЕИФ формат слике који може бити 50% мањи од старијих формата слика и доноси проширену функционалност (иако веома очекујемо додавање хардверског убрзања за тхе АВ1 заснован на АВИФ-у, за који се надамо да ће бити доступан у наредним годинама)

Куалцомм Спецтра 380 ће такође моћи да обрађује слике веће резолуције него претходних година, са својим двоструким 14-битним ЦВ-ИСП цевовод који подржава 22МП 30Хз истовремено снимање на двоструким камерама и 48МП 30Хз снимање са једном сликом сензор. Међутим, бржи цевовод за читање сензора се у овом случају не преводи у видео запис, где је Куалцомм Спецтра 380 подржава исти изворни 720п 480Хз (без коришћења кеш меморије на сензору) као и Спецтра 280 јесте.

Најбоље од свега, Куалцомм Спецтра 380 може наставити да се побољшава у будућности, јер његов нови модуларни ИСП дизајн доноси новооткривени флексибилност цевовода за снимање, отварајући потенцијал за различите методе обраде и за РАВ и за ИУВ пиксел домене.

Да ли сте узбуђени због проширене АИ функционалности у камерама? За шта се надате да ћете моћи да користите машински вид? Реците нам у коментарима испод!