Izlaists Qualcomm Spectra 380: pasaulē pirmais ISP ar integrētu AI

Qualcomm Spectra 380 veic milzīgu lēcienu uz priekšu skaitļošanas fotogrāfijā un kameru AI. Izlasiet visu par šogad gaidāmajiem milzīgajiem uzlabojumiem!

Vakar Havaju salās Snapdragon tehnoloģiju samitā, ilgi gaidītais Qualcomm Snapdragon 855 tika palaists. Lai gan jaunā mikroshēma ienes dažādas būtiskas izmaiņas (no ievērojami precīzāka GPS līdz pirmajai jaunajai 2,4 GHz WiFi versijai desmitgadē, līdz 5G mobilajam savienojumam), diskusijas turpina atgriezties pie attēlveidošanas un milzīgajiem uzlabojumiem, ko nodrošina Qualcomm Spectra 380. atnes.

Tradicionāli kameras ISP pārveido kameras neapstrādāto krāsu izvadi par kaut ko tādu, ko pārējais tālruni var izmantot mašīnredzei, taču, tā kā AI apstrāde ir kļuvusi sarežģītāka, ir kļuvusi integrācija ar specializētu aparatūru kritisks. Qualcomm ar saviem spēkiem spēra pirmos soļus šajā virzienā Qualcomm Spectra 280, cepšanas atbalsts vairāku kadru trokšņu samazināšanai un dziļuma noteikšanai tieši ISP, taču vēl bija tāls ceļš ejams. Šogad Qualcomm veic šo lēcienu, ieviešot aparatūras datora redzes paātrinājumu tieši Qualcomm Spectra 380 ISP un izveidojot to, ko viņi sauc par pasaulē pirmo CV-ISP.

Qualcomm Spectra 380 novērsīs sastrēgumus attēlu apstrādes cauruļvadā un ietaupīs līdz pat 4x enerģijas, salīdzinot ar iepriekšējām paaudzēm, veicot mašīnredzi. apstrādi tieši pašā ISP, novēršot nepieciešamību pamodināt CPU, GPU un HSP sarežģītiem fotografēšanas AI uzdevumiem un ievērojami uzlabojot procesora AR spējas.

Tas nozīmē, ka Qualcomm Snapdragon 855 aparatūras dziļuma noteikšana, objektu klasifikācija un objektu segmentēšana var notikt reāllaikā līdz pat 4k HDR 60 Hz. Tas dos mums dzīvu objektu vai fona nomaiņu reāllaika video, paverot jaunas iespējas paplašinātās realitātes (XR) lietojumprogrammas ar Qualcomm Snapdragon 855 mikroshēmojumu gan tālruņos, gan AR austiņas.

Tomēr Qualcomm Spectra 380 uzlabojumi neapstājas pie AI un AR. Qualcomm ir ieguldījis daudz darba krāsu telpas un spilgtuma uzlabošanā, pievienojot atbalstu pilnai HDR10+ video ierakstīšanai, padarot to iespējams ierakstīt video ar lielāku dinamisko diapazonu un plašāku krāsu telpu, lai pilnībā izmantotu mūsdienu tālruņu iespējas un televizori.

Jaunais ISP nodrošina arī uzlabotu aparatūras paātrinājumu VP9 video un HEVC balstītam HEIF attēla formātam, kas var būt par 50% mazāks nekā vecāki attēlu formāti un nodrošina paplašinātu funkcionalitāti (lai gan mēs ļoti sagaidām aparatūras paātrinājuma pievienošanu uz AV1 balstīts AVIF, kas, cerams, būs pieejams nākamajos gados)

Qualcomm Spectra 380 arī spēs apstrādāt augstākas izšķirtspējas attēlveidošanu nekā iepriekšējos gados, izmantojot savu dubulto 14 bitu. CV-ISP cauruļvads, kas atbalsta 22MP 30Hz vienlaicīgu uzņemšanu ar divām kamerām un 48MP 30Hz uzņemšanu ar vienu attēlu sensors. Tomēr ātrākais sensora nolasīšanas cauruļvads šajā gadījumā nepārvēršas par video Qualcomm Spectra 380 atbalsta to pašu sākotnējo 720p 480 Hz (neizmantojot sensora kešatmiņu), ko Spectra 280 izdarīja.

Pats labākais ir tas, ka Qualcomm Spectra 380 nākotnē var turpināt uzlaboties, jo tā jaunais modulārais ISP dizains ienes jaunumus. elastība attēlveidošanas cauruļvadam, paverot iespēju izmantot dažādas apstrādes metodes gan RAW, gan YUV pikseļiem domēni.

Vai jūs sajūsmina paplašināta AI funkcionalitāte kamerās? Kādiem nolūkiem jūs cerat izmantot mašīnredzi? Pastāstiet mums komentāros zemāk!