Käivitatud Qualcomm Spectra 380: maailma esimene integreeritud tehisintellektiga Interneti-teenuse pakkuja

Qualcomm Spectra 380 teeb arvutusfotograafias ja kaamera tehisintellektis tohutu hüppe edasi. Lugege kõike sel aastal toimuvate tohutute täiustuste kohta!

Eile Hawaiil Snapdragoni tehnoloogia tippkohtumisel, kauaoodatud Qualcomm Snapdragon 855 käivitati. Kuigi uus kiip toob kaasa mitmeid olulisi muudatusi (alates oluliselt täpsemast GPS-ist kuni esimese uue 2,4 GHz WiFi versioonini aastakümnel 5G mobiilsideühenduseni), pöördutakse pidevalt tagasi pildistamise ja Qualcomm Spectra 380 tohutute täiustuste juurde. toob.

Traditsiooniliselt tegeleb kaamera ISP kaamera töötlemata värviväljundite muutmisega millekski, mida ülejäänud telefoni saab kasutada masinnägemise jaoks, kuid tehisintellekti töötlemine on muutunud keerukamaks, on muutunud integreerimine spetsiaalse riistvaraga kriitiline. Qualcomm astus omaga esimesed sammud selle poole Qualcomm Spectra 280, küpsetamise tugi mitme kaadri müra vähendamiseks ja sügavuse tuvastamiseks otse ISP-sse, kuid teha oli veel pikk tee. Sel aastal teeb Qualcomm selle hüppe, ehitades riistvaralise arvutinägemise kiirenduse otse Qualcomm Spectra 380 ISP-sse ja luues selle, mida nad nimetavad maailma esimeseks CV-ISP-ks.

Qualcomm Spectra 380 eemaldab pilditöötluse torustiku kitsaskohad ja tagab masinnägemise abil kuni 4-kordse energiasäästu võrreldes eelmiste põlvkondadega. töötlemine otse ISP-s endas, kõrvaldades vajaduse äratada protsessorit, GPU-d ja HSP-d keerukate fotograafia AI-ülesannete jaoks ning täiustades oluliselt protsessori AR-i võimeid.

See tähendab, et Qualcomm Snapdragon 855 riistvaraline sügavustuvastus, objektide klassifitseerimine ja objektide segmenteerimine võivad toimuda reaalajas kuni 4k HDR 60 Hz sagedusega. See annab meile reaalajas videos reaalajas objekti või tausta asendamise, mis avab uusi võimalusi laiendatud reaalsuse (XR) rakendused Qualcomm Snapdragon 855 kiibistikuga nii telefonides kui ka AR-is kõrvaklapid.

Qualcomm Spectra 380 täiustused ei piirdu siiski AI ja AR-ga. Qualcomm on teinud palju tööd värviruumi ja heleduse täiustamiseks, lisades toe täielikule HDR10+ videosalvestusele, muutes selle võimalik salvestada videoid suurema dünaamilise ulatuse ja laiema värviruumiga, et kasutada täielikult ära tänapäevaste telefonide võimalusi ja telerid.

Uus Interneti-teenuse pakkuja pakub ka täiustatud riistvarakiirendust VP9 video ja HEVC-põhise HEIF-pildivormingu jaoks, mis võib olla 50% väiksem kui vanemad pildivormingud ja pakub laiendatud funktsioone (kuigi ootame väga riistvarakiirenduse lisamist a AV1 põhinev AVIF, mis on loodetavasti saadaval järgmistel aastatel)

Qualcomm Spectra 380 suudab oma kahekordse 14-bitise eraldusvõimega toime tulla ka varasematest aastatest kõrgema eraldusvõimega pildistamisega. CV-ISP torujuhe, mis toetab 22MP 30Hz samaaegset jäädvustamist kahe kaameraga ja 48MP 30Hz jäädvustamist ühe pildiga andur. Kiirem anduri lugemise konveier ei muundu sel juhul videoks, kuid kui Qualcomm Spectra 380 toetab sama loomulikku 720p 480 Hz (ilma anduri vahemälu kasutamata), mida Spectra 280 tegi.

Mis kõige parem, Qualcomm Spectra 380 võib tulevikus veelgi täiustuda, kuna selle uus modulaarne Interneti-teenuse pakkuja disain toob kaasa uue leiu. paindlikkus kujutise torujuhtme jaoks, avades potentsiaali erinevate töötlemismeetodite jaoks nii RAW kui ka YUV pikslite jaoks domeenid.

Kas olete põnevil kaamerate laiendatud AI-funktsioonidest? Milleks loodate masinnägemist kasutada? Rääkige meile allolevates kommentaarides!