A Qualcomm Spectra 380 hatalmas ugrást tesz előre a számítógépes fotózás és a fényképezőgép mesterséges intelligencia terén. Olvassa el az idei év jelentős fejlesztéseit!
Tegnap Hawaiin, a Snapdragon technológiai csúcstalálkozón, a régóta várt esemény Qualcomm Snapdragon 855 indították el. Míg az új chip számos lényeges változást hoz (a lényegesen pontosabb GPS-től az első új, 2,4 GHz-es WiFi verzióig évtized, az 5G mobilkapcsolatig), a vita folyamatosan visszatér a képalkotáshoz és a Qualcomm Spectra 380 által elért hatalmas fejlesztésekhez. hoz.
Hagyományosan a kamera ISP-je kezelte a kamera nyers színkimenetének átalakítását olyasmivé, amit a többi A telefon gépi látáshoz használható, de az AI-feldolgozás bonyolultabbá válásával a speciális hardverekkel való integráció vált kritikai. A Qualcomm megtette az első lépéseket e felé Qualcomm Spectra 280, sütési támogatás a több képkockás zajcsökkentéshez és a mélységérzékeléshez közvetlenül az ISP-be, de még hosszú volt az út. Idén a Qualcomm megteszi ezt az ugrást: hardveres számítógépes látásgyorsítást épít be közvetlenül a Qualcomm Spectra 380 ISP-be, és létrehozza azt, amit ők a világ első CV-ISP-jének hívnak.
A Qualcomm Spectra 380 megszünteti a szűk keresztmetszeteket a képfeldolgozó folyamatban, és a gépi látás révén akár 4-szeres energiamegtakarítást eredményez az előző generációkhoz képest A feldolgozás közvetlenül az internetszolgáltatón történik, így nem kell felébreszteni a CPU-t, a GPU-t és a HSP-t összetett fotózási mesterséges intelligencia-feladatokhoz, és jelentősen javítja a processzor AR-t képességeit.
Ez azt jelenti, hogy a hardveres mélységérzékelés, az objektumok osztályozása és az objektumok szegmentálása valós időben történhet akár 4k HDR 60 Hz-en a Qualcomm Snapdragon 855-ön. Ez élő objektum- vagy háttércserét biztosít számunkra valós idejű videóban, új lehetőségeket nyitva meg a számára kiterjesztett valóság (XR) alkalmazások a Qualcomm Snapdragon 855 lapkakészlettel mind a telefonokban, mind az AR-ben fejhallgatók.
A Qualcomm Spectra 380 fejlesztései azonban nem állnak meg az AI-nál és az AR-nél. A Qualcomm rengeteget fektetett a színtér és a fényerő fejlesztésébe, és támogatja a teljes HDR10+ videórögzítést, így nagyobb dinamikatartományú és szélesebb színterű videók rögzítése, a modern telefonok képességeinek teljes kihasználása és tévék.
Az új ISP továbbfejlesztett hardveres gyorsítást is kínál a VP9 videóhoz és a HEVC alapú HEIF képformátumhoz, amely 50%-kal kisebb lehet. mint a régebbi képformátumok, és kibővített funkcionalitást hoz (bár nagyon várjuk a hardveres gyorsítás hozzáadását a AV1 alapú AVIF, amely remélhetőleg a következő években elérhető lesz)
A Qualcomm Spectra 380 a korábbi éveknél nagyobb felbontású képalkotást is képes lesz kezelni, kettős 14 bitesével CV-ISP csővezeték, amely támogatja a 22 MP 30 Hz-es párhuzamos rögzítést kettős kamerán, és a 48 MP 30 Hz-es rögzítést egyetlen képpel érzékelő. A gyorsabb szenzorolvasási folyamat azonban ebben az esetben nem alakul át videóvá, ha azonban a A Qualcomm Spectra 380 ugyanazt a natív 720p 480 Hz-et támogatja (az érzékelő gyorsítótár használata nélkül), mint a Spectra 280 igen.
A legjobb az egészben, hogy a Qualcomm Spectra 380 a jövőben tovább fejlődhet, mivel az új moduláris ISP-kialakítás újszerű rugalmasság a képalkotó folyamatban, ami lehetővé teszi a különböző feldolgozási eljárások lehetőségét mind a RAW, mind a YUV pixel esetében domainek.
Izgatott a kamerák kibővített mesterséges intelligencia funkciói miatt? Ön szerint mire tudja majd használni a gépi látást? Mondja el nekünk az alábbi megjegyzésekben!