Qualcomm Spectra 380 face un salt masiv înainte în fotografia computațională și AI al camerei. Citiți totul despre îmbunătățirile masive care vor veni anul acesta!
Ieri, în Hawaii, la Snapdragon Technology Summit, mult așteptatul Qualcomm Snapdragon 855 a fost lansat. În timp ce noul cip aduce diverse modificări substanțiale (de la GPS semnificativ mai precis la prima versiune nouă WiFi de 2,4 GHz într-un deceniu, la conectivitate celulară 5G), discuția continuă să revină la imagini și la îmbunătățirile masive pe care Qualcomm Spectra 380 aduce.
În mod tradițional, ISP-ul camerei se ocupa de transformarea culorilor brute ale camerei în ceva ce restul telefonul poate fi folosit pentru viziune artificială, dar pe măsură ce procesarea AI a devenit mai complexă, integrarea cu hardware-ul specializat a devenit critic. Qualcomm a făcut primii pași în acest sens cu ajutorul lor Qualcomm Spectra 280, suport de coacere pentru reducerea zgomotului cu mai multe cadre și detectarea adâncimii chiar în ISP, dar mai era un drum lung de parcurs. Anul acesta, Qualcomm face acest salt, construind accelerarea hardware a viziunii computerizate chiar în Qualcomm Spectra 380 ISP și creând ceea ce ei numesc primul CV-ISP din lume.
Qualcomm Spectra 380 va elimina blocajele din conducta de procesare a imaginii și va duce la economii de energie de până la 4 ori mai mari decât generațiile anterioare, prin realizarea viziunii artificiale. procesarea chiar pe ISP-ul însuși, eliminând necesitatea de a activa CPU, GPU și HSP pentru sarcini complexe de fotografiere AI și îmbunătățind considerabil AR-ul procesorului capabilități.
Aceasta înseamnă că detectarea adâncimii hardware, clasificarea obiectelor și segmentarea obiectelor se pot întâmpla în timp real până la 4k HDR 60Hz pe Qualcomm Snapdragon 855. Acest lucru ne va oferi obiectul live sau înlocuirea fundalului în videoclipuri în timp real, deschizând noi posibilități pentru aplicații de realitate extinsă (XR) cu chipset-ul Qualcomm Snapdragon 855 atât în telefoane, cât și în AR căștile.
Totuși, îmbunătățirile pentru Qualcomm Spectra 380 nu se opresc la AI și AR. Qualcomm a depus mult de lucru în îmbunătățirea spațiului de culoare și a luminozității, adăugând suport pentru înregistrarea video completă HDR10+, făcându-l posibil să înregistrați videoclipuri cu o gamă dinamică mai mare și spații de culoare mai largi, pentru a profita din plin de capacitățile telefoanelor moderne și televizoare.
Noul ISP aduce, de asemenea, accelerare hardware îmbunătățită pentru video VP9 și pentru formatul de imagine HEIF bazat pe HEVC, care poate fi cu 50% mai mic decât formatele de imagine mai vechi și aduce o funcționalitate extinsă (deși anticipăm cu multă adăugare de accelerare hardware pentru cel AV1 AVIF bazat, care sperăm că va fi disponibil în anii următori)
Qualcomm Spectra 380 va putea, de asemenea, să gestioneze imagini cu rezoluție mai mare decât anii precedenți, cu dublul său de 14 biți. Conducta CV-ISP care acceptă captura simultană de 22 MP la 30 Hz pe camere duale și captură de 48 MP la 30 Hz cu o singură imagine senzor. Conducta de citire a senzorului mai rapid nu se traduce în video în acest caz, totuși, în cazul în care Qualcomm Spectra 380 acceptă același 720p 480Hz nativ (fără a utiliza memoria cache pe senzor) ca și Spectra 280 au făcut-o.
Cel mai bun dintre toate, Qualcomm Spectra 380 s-ar putea continua să se îmbunătățească în viitor, deoarece noul său design modular ISP aduce o nouă descoperire. flexibilitate la conducta de imagini, deschizând potențialul pentru diferite metode de procesare atât pentru pixeli RAW, cât și pentru YUV domenii.
Ești încântat de funcționalitatea AI extinsă în camere? Pentru ce speri să poți folosi viziunea artificială? Spune-ne în comentariile de mai jos!