Qualcomm Spectra 380 fa un enorme passo avanti nella fotografia computazionale e nell'intelligenza artificiale della fotocamera. Leggi tutto sugli enormi miglioramenti in arrivo quest'anno!
Ieri alle Hawaii allo Snapdragon Technology Summit, il tanto atteso Qualcomm Snapdragon 855 è stato lanciato. Anche se il nuovo chip apporta diverse novità sostanziali (dal GPS significativamente più preciso alla prima nuova versione WiFi a 2,4 GHz in versione decennio, alla connettività cellulare 5G), la discussione continua a tornare sull'imaging e sugli enormi miglioramenti apportati dal Qualcomm Spectra 380 porta.
Tradizionalmente l'ISP della fotocamera si occupava di trasformare i colori grezzi della fotocamera in qualcosa che il resto del il telefono può essere utilizzato per la visione artificiale, ma poiché l’elaborazione dell’intelligenza artificiale è diventata più complessa, è diventata anche l’integrazione con hardware specializzato critico. Qualcomm ha mosso i primi passi in questa direzione con il proprio
Qualcomm Spectra 280, fornendo supporto per la riduzione del rumore multi-frame e il rilevamento della profondità direttamente nell'ISP, ma c'era ancora molta strada da fare. Quest'anno Qualcomm fa questo salto, integrando l'accelerazione hardware della visione artificiale direttamente nell'ISP Qualcomm Spectra 380 e creando quello che chiamano il primo CV-ISP al mondo.Qualcomm Spectra 380 rimuoverà i colli di bottiglia nella pipeline di elaborazione delle immagini e comporterà un risparmio energetico fino a 4 volte superiore rispetto alle generazioni precedenti eseguendo la visione artificiale elaborazione direttamente sull'ISP stesso, eliminando la necessità di riattivare CPU, GPU e HSP per complesse attività di intelligenza artificiale fotografica e migliorando notevolmente l'AR del processore capacità.
Ciò significa che il rilevamento della profondità hardware, la classificazione degli oggetti e la segmentazione degli oggetti possono avvenire in tempo reale fino a 4K HDR 60Hz su Qualcomm Snapdragon 855. Questo ci fornirà la sostituzione di oggetti dal vivo o di sfondo in video in tempo reale, aprendo nuove possibilità per applicazioni di realtà estesa (XR) con il chipset Qualcomm Snapdragon 855 sia nei telefoni che in AR cuffie.
I miglioramenti per Qualcomm Spectra 380 non si fermano però all'intelligenza artificiale e all'AR. Qualcomm ha lavorato molto sui miglioramenti dello spazio colore e della luminosità, aggiungendo il supporto per la registrazione video HDR10+ completa, rendendolo possibile registrare video con una maggiore gamma dinamica e spazi colore più ampi, per sfruttare appieno le capacità dei telefoni moderni e televisori.
Il nuovo ISP offre anche una migliore accelerazione hardware per i video VP9 e per il formato immagine HEIF basato su HEVC che può essere più piccolo del 50% rispetto ai formati di immagine precedenti e offre funzionalità estese (anche se prevediamo con grande anticipazione l'aggiunta dell'accelerazione hardware per IL AV1 AVIF, che si spera sarà disponibile negli anni futuri)
Il Qualcomm Spectra 380 sarà anche in grado di gestire immagini con una risoluzione più elevata rispetto agli anni precedenti, con il suo doppio processore a 14 bit Pipeline CV-ISP che supporta l'acquisizione simultanea da 22 MP a 30 Hz su doppia fotocamera e l'acquisizione da 48 MP a 30 Hz con una singola immagine sensore. Tuttavia, in questo caso, la pipeline di lettura del sensore più veloce non si traduce in video, dove il file Qualcomm Spectra 380 supporta lo stesso 720p 480Hz nativo (senza utilizzare la cache sul sensore) di Spectra 280 lo hanno fatto.
Ma soprattutto, Qualcomm Spectra 380 potrebbe continuare a migliorare in futuro, poiché il suo nuovo design ISP modulare apporta una nuova innovazione. flessibilità alla pipeline di imaging, aprendo il potenziale per diversi metodi di elaborazione sia per i pixel RAW che per quelli YUV domini.
Sei entusiasta delle funzionalità AI estese nelle fotocamere? Per cosa speri di poter utilizzare la visione artificiale? Raccontacelo nei commenti qui sotto!