Predstavljen Qualcomm Spectra 380: prvi ponudnik internetnih storitev na svetu z integrirano umetno inteligenco

Qualcomm Spectra 380 naredi ogromen korak naprej na področju računalniške fotografije in AI fotoaparata. Preberite vse o ogromnih izboljšavah, ki prihajajo letos!

Včeraj na Havajih na Snapdragon Technology Summitu, dolgo pričakovanem Qualcomm Snapdragon 855 je bil lansiran. Medtem ko novi čip prinaša različne bistvene spremembe (od bistveno natančnejšega GPS-a do prve nove različice 2,4 GHz WiFi v desetletju do celične povezljivosti 5G), se razprava vedno znova vrača k slikanju in ogromnim izboljšavam Qualcomm Spectra 380 prinaša.

Običajno je ponudnik internetnih storitev fotoaparata poskrbel za preoblikovanje neobdelanih barvnih izhodov fotoaparata v nekaj, kar ostali telefon lahko uporablja za strojni vid, a ker je obdelava z umetno inteligenco postala bolj zapletena, je postala integracija s specializirano strojno opremo kritično. Qualcomm je naredil prve korake k temu s svojim Qualcomm Spectra 280, podporo za zmanjšanje hrupa v več slikah in zaznavanje globine neposredno v ISP, vendar je bila pot še dolga. Letos je Qualcomm naredil ta preskok in vgradil strojno pospeševanje računalniškega vida naravnost v Qualcomm Spectra 380 ISP in ustvaril, čemur pravijo, prvi CV-ISP na svetu.

Qualcomm Spectra 380 bo odstranil ozka grla v cevovodu za obdelavo slik in povzročil do 4-kratne prihranke energije v primerjavi s prejšnjimi generacijami z izvajanjem strojnega vida obdelava neposredno pri samem ponudniku internetnih storitev, odprava potrebe po prebujanju CPE-ja, GPE-ja in HSP-ja za zapletene naloge umetne inteligence pri fotografiranju ter močno izboljšanje AR procesorja zmogljivosti.

To pomeni, da se strojno zaznavanje globine, klasifikacija objektov in segmentacija objektov lahko zgodijo v realnem času za do 4k HDR 60Hz na Qualcomm Snapdragon 855. To nam bo omogočilo zamenjavo predmeta ali ozadja v živo v videu v realnem času, kar bo odprlo nove možnosti za aplikacije razširjene resničnosti (XR) z naborom čipov Qualcomm Snapdragon 855 tako v telefonih kot v RR slušalke.

Izboljšave za Qualcomm Spectra 380 pa se ne ustavijo pri AI in AR. Qualcomm je veliko dela vložil v barvni prostor in izboljšave svetlosti ter dodal podporo za polno snemanje videa HDR10+, kar je mogoče snemati videoposnetke z večjim dinamičnim razponom in širšimi barvnimi prostori, da v celoti izkoristite zmogljivosti sodobnih telefonov in televizorji.

Novi ponudnik internetnih storitev prinaša tudi izboljšano strojno pospeševanje za video VP9 in slikovni format HEIF, ki temelji na HEVC, ki je lahko 50 % manjši kot starejši slikovni formati in prinaša razširjeno funkcionalnost (čeprav močno pričakujemo dodatek strojnega pospeševanja za the AV1 AVIF, ki bo, upajmo, na voljo v prihodnjih letih)

Qualcomm Spectra 380 bo z dvojnim 14-bitnim procesorjem omogočal tudi slikanje z višjo ločljivostjo kot prejšnja leta. Cevovod CV-ISP podpira 22 MP 30 Hz sočasni zajem z dvojnimi kamerami in 48 MP 30 Hz zajem z eno samo sliko senzor. Hitrejši cevovod za branje senzorja se v tem primeru ne prenese na video, kjer je Qualcomm Spectra 380 podpira isto izvorno 720p 480Hz (brez uporabe predpomnilnika na senzorju) kot Spectra 280 naredil.

Najboljše od vsega pa je, da se bo Qualcomm Spectra 380 v prihodnosti morda še izboljševal, saj njegova nova modularna zasnova ISP prinaša novo odkrito prilagodljivost slikovnemu cevovodu, kar odpira potencial za različne metode obdelave slikovnih pik RAW in YUV domene.

Ali ste navdušeni nad razširjeno funkcionalnostjo AI v fotoaparatih? Za kaj upate, da boste lahko uporabljali strojni vid? Povejte nam v spodnjih komentarjih!