Qualcomm Spectra 380 čini veliki korak naprijed u računalnoj fotografiji i umjetnoj inteligenciji fotoaparata. Pročitajte sve o golemim poboljšanjima koja dolaze ove godine!
Jučer na Havajima na Snapdragon Technology Summitu, dugo očekivanom Qualcomm Snapdragon 855 je pokrenut. Dok novi čip donosi razne značajne promjene (od znatno preciznijeg GPS-a do prve nove 2,4 GHz WiFi verzije u desetljeću, na 5G mobilnu povezanost), rasprava se stalno vraća na slike i golema poboljšanja Qualcomm Spectra 380 donosi.
Tradicionalno bi se ISP kamere bavio pretvaranjem sirovih izlaza u boji kamere u nešto što ostatak telefon može koristiti za strojni vid, ali kako je AI obrada postala složenija, postala je integracija sa specijaliziranim hardverom kritično. Qualcomm je napravio prve korake prema tome sa svojim Qualcomm Spectra 280, podršku za smanjenje buke u više okvira i dubinsko detektiranje izravno u ISP-u, ali još je bio dug put. Ove godine Qualcomm čini taj skok, ugrađujući hardversko ubrzanje računalnog vida izravno u Qualcomm Spectra 380 ISP i stvarajući ono što nazivaju prvim CV-ISP-om na svijetu.
Qualcomm Spectra 380 će ukloniti uska grla u procesu obrade slike i rezultirati do 4x uštedom energije u odnosu na prethodne generacije izvođenjem strojnog vida obrada izravno na samom ISP-u, uklanjajući potrebu za buđenjem CPU-a, GPU-a i HSP-a za složene fotografske AI zadatke i uvelike poboljšavajući AR procesora mogućnostima.
To znači da se hardversko detektiranje dubine, klasifikacija objekata i segmentacija objekata mogu dogoditi u stvarnom vremenu za do 4k HDR 60Hz na Qualcomm Snapdragon 855. To će nam omogućiti zamjenu živog objekta ili pozadine u videu u stvarnom vremenu, otvarajući nove mogućnosti za aplikacije proširene stvarnosti (XR) s Qualcomm Snapdragon 855 čipsetom u telefonima iu AR-u slušalice.
Poboljšanja za Qualcomm Spectra 380 ipak se ne zaustavljaju na AI i AR. Qualcomm je uložio puno rada u poboljšanja prostora boja i svjetline, dodajući podršku za puno HDR10+ video snimanje, čineći moguće snimati videozapise s većim dinamičkim rasponom i širim prostorom boja, kako bi se u potpunosti iskoristile mogućnosti modernih telefona i televizore.
Novi ISP također donosi poboljšano hardversko ubrzanje za VP9 video i za HEVC temeljen HEIF format slike koji može biti 50% manji od starijih slikovnih formata i donosi proširenu funkcionalnost (iako jako očekujemo dodavanje hardverskog ubrzanja za the AV1 temeljen AVIF, koji će, nadamo se, biti dostupan u narednim godinama)
Qualcomm Spectra 380 također će moći rukovati slikama više rezolucije nego prethodnih godina, sa svojim dvostrukim 14-bitnim CV-ISP cjevovod podržava 22MP 30Hz istovremeno snimanje na dvostrukim kamerama i 48MP 30Hz snimanje s jednom slikom senzor. Brži cjevovod očitavanja senzora ne prenosi se na video u ovom slučaju, međutim, gdje je Qualcomm Spectra 380 podržava isti izvorni 720p 480Hz (bez korištenja predmemorije na senzoru) kao i Spectra 280 učinio.
Najbolje od svega, Qualcomm Spectra 380 bi se mogao nastaviti poboljšavati u budućnosti, jer njegov novi modularni ISP dizajn donosi novootkriveno fleksibilnost slikovnog cjevovoda, otvarajući potencijal za različite metode obrade za RAW i YUV piksel domene.
Jeste li uzbuđeni zbog proširene AI funkcionalnosti u fotoaparatima? Za što se nadate da ćete moći koristiti strojni vid? Recite nam u komentarima ispod!