Qualcomm Spectra 380 julkaistiin: maailman ensimmäinen integroidulla tekoälyllä varustettu Internet-palveluntarjoaja

Qualcomm Spectra 380 ottaa valtavan harppauksen eteenpäin laskennallisessa valokuvauksessa ja kameran tekoälyssä. Lue kaikki tämän vuoden mittavista parannuksista!

Eilen Havaijilla Snapdragon Technology Summitissa, kauan odotettu Qualcomm Snapdragon 855 laukaistiin. Vaikka uusi siru tuo mukanaan useita merkittäviä muutoksia (merkittävästi tarkemmasta GPS: stä ensimmäiseen uuteen 2,4 GHz WiFi-versioon vuosikymmenellä 5G-matkapuhelinyhteyteen), keskustelu palaa jatkuvasti kuvantamiseen ja Qualcomm Spectra 380:n mittaviin parannuksiin. tuo.

Perinteisesti kameran Internet-palveluntarjoaja on muuttanut kameran raakaväritulosteet joksikin, mitä muut puhelinta voidaan käyttää konenäköön, mutta kun tekoälyn käsittely on monimutkaistunut, integraatio erikoislaitteistoihin on tullut kriittinen. Qualcomm otti ensimmäiset askeleet kohti tätä heidän kanssaan Qualcomm Spectra 280, paistotuki useiden ruutujen kohinanvaimennusta ja syvyyden tunnistamista varten suoraan ISP: ssä, mutta matkaa oli vielä pitkä. Tänä vuonna Qualcomm ottaa tämän harppauksen rakentamalla laitteiston tietokonenäkökiihdytyksen suoraan Qualcomm Spectra 380 ISP: hen ja luomalla sen, mitä he kutsuvat maailman ensimmäiseksi CV-ISP: ksi.

Qualcomm Spectra 380 poistaa pullonkaulat kuvankäsittelyputkistosta ja mahdollistaa jopa 4-kertaisen virransäästön edellisiin sukupolviin verrattuna konenäön avulla käsittely suoraan Internet-palveluntarjoajalta, mikä poistaa tarpeen herättää CPU: ta, GPU: ta ja HSP: tä monimutkaisia ​​valokuvaus tekoälytehtäviä varten ja parantaa huomattavasti prosessorin AR: tä kykyjä.

Tämä tarkoittaa, että laitteistosyvyyden tunnistus, objektien luokittelu ja objektien segmentointi voivat tapahtua reaaliajassa jopa 4k HDR 60 Hz: ssä Qualcomm Snapdragon 855:ssä. Tämä antaa meille elävän kohteen tai taustan korvaamisen reaaliaikaisessa videossa, mikä avaa uusia mahdollisuuksia Extended reality (XR) -sovellukset Qualcomm Snapdragon 855 -piirisarjalla sekä puhelimissa että AR: ssä kuulokkeet.

Qualcomm Spectra 380:n parannukset eivät kuitenkaan pysähdy tekoälyyn ja AR: hen. Qualcomm on tehnyt paljon työtä väriavaruuden ja kirkkauden parantamiseksi ja lisäsi tuen täyden HDR10+-videotallennukseen, mikä tekee siitä mahdollista tallentaa videoita suuremmalla dynaamisella alueella ja laajemmilla väriavaruuksilla, jotta voit hyödyntää täysimääräisesti nykyaikaisten puhelimien ominaisuuksia ja televisiot.

Uusi ISP tuo myös parannetun laitteistokiihdytyksen VP9-videoon ja HEVC-pohjaiseen HEIF-kuvamuotoon, joka voi olla 50 % pienempi. kuin vanhemmat kuvamuodot ja tuo laajennettuja toimintoja (vaikka odotammekin laitteistokiihdytyksen lisäämistä the AV1 perustuva AVIF, joka toivottavasti on saatavilla tulevina vuosina)

Qualcomm Spectra 380 pystyy myös käsittelemään aiempia vuosia korkeamman resoluution kuvantamista kahdella 14-bittisellä näytöllä. CV-ISP-putki, joka tukee 22 megapikselin 30 Hz: n samanaikaista kaappausta kahdella kameralla ja 48 megapikselin 30 Hz: n sieppausta yhdellä kuvalla sensori. Nopeampi anturin lukuputki ei kuitenkaan muutu videoksi tässä tapauksessa, jos Qualcomm Spectra 380 tukee samaa alkuperäistä 720p 480 Hz (ilman anturin välimuistia) kuin Spectra 280 teki.

Mikä parasta, Qualcomm Spectra 380 saattaa edelleen kehittyä tulevaisuudessa, sillä sen uusi modulaarinen Internet-palveluntarjoajasuunnittelu tuo uudenlaisen joustavuus kuvantamisputkistossa, mikä avaa mahdollisuudet erilaisille prosessointimenetelmille sekä RAW- että YUV-pikseleille verkkotunnuksia.

Oletko innostunut laajennetusta AI-toiminnallisuudesta kameroissa? Mihin toivot voivasi käyttää konenäköä? Kerro meille alla olevissa kommenteissa!