Interviu: Qualcomm apie AI ir Snapdragon 855 Hexagon 690 DSP

Qualcomm Gary Brotman ir Ziad Asghar susėdo su XDA interviu apie AI būseną ir kas naujo Hexagon 690 DSP Snapdragon 855.

Kai „Qualcomm“ pristatė savo naują Snapdragon 855 mobilioji platforma, jie reklamavo esminius patobulinimus visais mobiliojo kompiuterijos aspektais. Paprastam vartotojui nesunku suprasti procesoriaus ir GPU patobulinimai galutiniam vartotojui kurį „Qualcomm“ sukūrė „Snapdragon 855“. Geresnis procesoriaus našumas reiškia, kad programos įkeliamos greičiau, o geresnis GPU našumas – geresnis kadrų dažnis žaidžiant. Naudotojams ne taip intuityvu suprasti AI (dirbtinį intelektą), o ypač mašininio mokymosi metodai, kuriuos vis dažniau naudoja programos ir paslaugos, pvz., dirbtinis nervas tinklai. „Qualcomm“ padarė didžiulį AI darbo krūvio našumą naudojant „Snapdragon 855“ dėl patobulintų skaičiavimų ir ypač dėl atnaujinto Hexagon 690 DSP. Susėdome su Gary Brotman, „Qualcomm“ AI ir mašininio mokymosi strategijos bei produktų planavimo vadovu, ir Ziadu Asgharu, „Qualcomm“ viceprezidentu. „Snapdragon Roadmap Planning“ ir „Qualcomm“ AI, XR, konkurencinė strategija, kad sužinotumėte daugiau apie „Qualcomm“ patobulinimus, atliktus atliekant dirbtinio intelekto darbo krūvius.


Mario Serrafero: "Taigi, naujasis DSP. Praėjusiais metais paklausiau jūsų apie atakos strategiją, susijusią su tuo, kaip „Qualcomm“ stumia, reklamavo, parduodavo ir perduodavo DSP ir HVX, ypač. Tuo metu, kaip AI blokas, daugumai skaitytojų ir vartotojų jis vis dar buvo palyginti naujas. Taigi mums įdomu, kaip jūs pastebėjote, kad tai pasikeitė nuo tada, kai toliau reklamuojamas 845.

Garis Brotmanas: „Pirmiausia, kai pradėjome tai daryti su 820, jis vis dar buvo labai orientuotas į centrinį procesorių ir GPU ir naudojo DSP ir vektorinio apdorojimo galimybės iš tikrųjų atsirado dėl to, kad „Google“ bando pasiekti „TensorFlow“ ir 8 bitų matematika. Taigi mes tikrai ištiesėme kojas DSP arba, tarkime, vektoriniuose procesoriuose. Atsižvelgiant į šešiakampio vektorinio procesoriaus brandą ir į tai, kaip mes galėjome taip greitai patobulinti šį planą per kitus du kartos, ir naudojimo atvejai, kuriuos matėme, o tuo metu pagrindiniai klasifikavimo tinklai buvo gana paprasti ir nebuvo daug Heft. Jie puikiai veikia su 8 bitų matematika. Specialus greitintuvas net ir praėjusiais metais kėlė pavojų, kad iš esmės plotas bus paskirstytas tam, kas gali būti nepritaikyta. Naudojimo atvejų santaka – tai viskas, kas priklauso nuo standartinės vienos kameros, super raiškos ar segmentavimo realiuoju laiku. Kai kuriais atvejais šie dalykai vyksta vienu metu, kai reikia turėti bent tam tikrą pagreičio lygį, kurį galite sustabdyti ir vis tiek nuskaityti vektorinio procesoriaus ar net GPU ciklus. Tai buvo tinkamas laikas.

Tai tikrai buvo kažkas, ką turėjome planuoti daug anksčiau nei tada, kai kalbėjomės praėjusį kartą, bet manau, kad visi šis verslas lažinasi, kad jie tiksliai arba beveik tiksliai žino, koks bus darbo krūvis. Kokio tipo tikslumas turėtų būti reikalingas ir ar padarėte pakankamai biudžeto, kad patenkintumėte būsimus naudojimo atvejus. Tai darome gana apgalvotai – Qualcomm visada buvo orientuotas į naudojimo atvejus – ir nenorėjome paleisti rizika, kad bus sukurtas specialus pagreitis, kuris nebūtų naudojamas, nes pastaruoju metu jis gali būti pasenęs ciklas. Mes matome pakankamai vien tik bendrosios konvoliucijos prasme, kad tam skirtas greitintuvas gali atlikti fantastišką darbą. Vėlgi, ciklų atlaisvinimas kitur. Kalbant apie strategiją, kurią turime naudodami šį naują greitintuvą: jis yra skirtas, tai nauja architektūra. Tai nėra šešiakampio darinys. Bet jei šiandien galvojate apie tinklą, yra tam tikros netiesiškumo funkcijos, kurios netinkamai veikia tam tikruose pagreičiuose.

Mario Serrafero: "Taip, sigmoidas, ReLU..."

Garis Brotmanas: „Būtent, Softmax. Ir jūs turite juos įdėti kitur arba į centrinį procesorių. Tačiau mūsų atveju DSP iš tikrųjų yra valdymas, kaip mes tai sukūrėme po gaubtu. Jis nustato, kur veikia tinklas ir kur veikia sluoksniai, ir gali nuspręsti, ar yra tam tikrų dalykų, kurie turėtų veikti DSP kaip atsarginė priemonė, o ne tensoriniame procesoriuje. Taigi šis poravimas mums buvo labai prasmingas. Tačiau tai nepaneigia mūsų įsitikinimų ir strategijos, kad kiekvienas pagrindinis mūsų SoC branduolys turi a vaidmenį, todėl optimizuojame visur, tačiau vis dar yra daug kintamumo ir taip bus Tęsti."

Mario Serrafero: „Kita tema, kuria norime pakalbėti, yra naudojimo atvejai. Kaip sakėte, „Qualcomm“ yra labai orientuotas į naudojimo atvejus, matėme, kad dirbtinis intelektas mobiliesiems pasirodė trijose pagrindinėse srityse: kalbos atpažinimo, sekos numatymas, pvz., su eilutėmis ir spausdinimas, ir, žinoma, kompiuterinis matymas, pvz., AI filtrai, [ir objektas pripažinimas]. Kompiuterinis matymas sprogo, dabar jį matote visur. Su kalbos atpažinimo funkcija pastebėjau, kad kiekvienas turi savo AI padėjėją, kiekvienas turi savo asistentą. Dabar visa tai galima padaryti esant nedideliam delsos laikui ir puikiai saugumui. Bet kas bus toliau naudojant mašininio mokymosi atvejus ir ar visus tuos naudojimo atvejus sukurs didžiosios pasaulio įmonės – visi „Snapchat“ pasaulyje, „Facebook“? Kaip matote, kad riedėjimas vyksta?"

Garis Brotmanas: „Nemanau, kad galiu nurodyti žudiko naudojimo atvejį. Tačiau galimybės leidžia atlikti didesnį skaičiavimo sudėtingumą, o regėjimo atveju įvesties skiriamoji geba gali būti didesnė. Nedirbate su žemos raiškos vaizdais, kad galėtumėte naudoti „bokeh“. Anksčiau kitame interviu buvo diskutuojama apie 4K srautinį pavyzdį. Nesiruošiu prognozuoti, kad tai įmanoma, bet kūrėjai, su kuriais dirbame, nesvarbu, ar tai būtų didelės įmonės, tokios kaip „Google“, ar mūsų programinės įrangos kūrimo partneriai, kurie iš tikrųjų kuria algoritmus, kurie naudoja daug šių mobiliųjų funkcijų, jie tiesiog nori stumti daugiau. Jie nori eiti toliau. Jei ką nors matyčiau dėl tolesnių veiksmų, tai tikriausiai būtų mažiau apie tai, kas vyksta virš linijos arba programos lygiu, ir daugiau apie tai, kas vyksta sistemoje, pvz., gaminio veikimo tobulinimas, energijos valdymas ir net fotoaparato konvejeryje, o ne tik tai. Paminėjote garsą ir tai, kiek raktinių žodžių ketinate palaikyti arba ar galėtumėte atlikti triukšmo slopinimą įrenginyje. Raktinis žodis yra įdomus, nes nėra lengva sukurti biblioteką – jūsų atmintis yra ribota. Taigi vis tiek bus pusiausvyra tarp to, kas yra vietinė, ir to, kas vyks debesyje.

Ziadas Asgharas: „Galiu šiek tiek pridurti. Taigi bent jau dvi sritys, kuriose jis labai auga, šiandien yra garso ir vaizdo gavimas. Matome, kad jis turi daug naudojimo atvejų. Džekas kalbėjo apie tai iš fotoaparato perspektyvos, mes turėjome dirbtinio intelekto variklį, kuriame galite daug išnaudoti vaizdų naudojimo atvejais. Kai kurie iš tų, kurie buvo rodomi šiandien. Ir tada, jei pažvelgsite į garsą, mes ne tiek daug apie tai kalbėjome, bet iš tikrųjų taip pat įtraukėme keletą garso galimybių prie garso bloko. Galime geriau suaktyvinti balsą triukšmingesnėje aplinkoje. Galime geriau slopinti triukšmą [vaizduojant]. Visi šie gebėjimai iš esmės jau vyksta. Yra partnerių, kuriuos Gary šiandien parodė IPT, yra daug daugiau tokių. Taigi manau, kad tai yra du aspektai, į kuriuos šiandien esame labiau susikoncentravę.

Garis Brotmanas: „Ir tada kitas žingsnis – neketinu prognozuoti, kada tai įvyks – ar dabar pakanka apskaičiuoti, kur Mokymasis įrenginyje ir eksperimentai, susiję su faktiniu mokymusi įrenginyje, greičiausiai vyks kitame etape ciklas“.

Mario Serrafero: „Tikriausiai tai tema, kurią smagiau aptarti, nes „Qualcomm“ laikosi „Hexagon DSP“ vardo ir HVX, o kitos įmonės renkasi „neuroninį“. Kaip Qualcomm mato šį neatitikimą ir šias skirtingas strategijas bei metodus, daugiausia rinkodara, bet galime šiek tiek vėliau pereiti prie heterogeninio skaičiavimo ir konkrečių blokų bitų kaip gerai“.

Garis Brotmanas: „Kadangi „Hexagon“ jau turi DSP sukauptą nuosavą kapitalą, žmogus iškart imtų galvoti, kad mes tik pratęsiame savo DSP strategiją. Tiesą sakant, kalbant apie prekės ženklą, jei pažvelgsite į visus tris procesorius, skaliarą, vektorių ir dabar skirtą tenzoriaus greitintuvą, jie nėra visi DSP. Hexagon yra tikrai aukštesnio lygio prekės ženklas nei tik DSP. Yra keletas DSP. Manau, kad į rinkodaros klausimus tikriausiai yra šiek tiek sunkiau atsakyti, nes kiekvienas regionas yra skirtingas. Kinija labai orientuota į NPU, nes tai pravardė, kuri buvo įvesta praėjusiais metais ir, atrodo, prigijo. Nepasakyčiau, kad tai veikė kitur visame pasaulyje. „Google“ turi tensorinį procesorių ir atrodo, kad tenzoras rezonuoja“.

Qualcomm Snapdragon 855 patobulinti AI darbo krūvio našumą. Šaltinis: Qualcomm.

Mario Serrafero: „Daugelis žmonių turi skirtingus vardus“.

Garis Brotmanas: „Galiausiai tai priklauso nuo to, ką OĮG nori padaryti. Jei tai svarbu jų klientams, jie turi išsiaiškinti, kaip jie galėtų panaudoti tą apdorojimo galimybę ir atskirti jas pagal galimybes. Mūsų variklis ir, mano manymu, didžioji dalis mūsų turimų apdorojimo galimybių vis tiek būtų labai vektoriniai ir orientuoti į bendrą derinį. Pats specialus apdorojimas, tai, kaip jis daugina matricą, yra tas pats specialus procesorius, kurį [naudotų] NPU. Rinkodaros klausimas yra įdomus, ir aš pamiršau, koks buvo Keito atsakymas?

Ziadas Asgharas: „Jo atsakymas buvo toks: „galite vadinti kaip tik norite, kad galėtumėte parduoti daugiau produktų“.

Garis Brotmanas: "Tai buvo beveik viskas; tai buvo teisinga, tai buvo labai atviras atsakymas“.

Ziadas Asgharas: „Manau, kad Gary tai puikiai apėmė. Kai kurie žmonės šį pravardę vartoja kaip terminą taip, kad beveik teigiama arba numanoma, kad tai tik apriboja šį bloką. Bet mes matome, kad visas šis nevienalytis požiūris į galimybę naudoti CPU, GPU, arba šešiakampį tenzorių vektorius, suteikia įvairių kompromisų dėl galios ir našumo tikslumo, ir to jums reikia šiandien. Nes nežinome, kokiai programai reikalingas tikslumas, kam reikalingas tvarus veikimas arba kam to nereikia. Taigi mes tikime, kad tai yra visapusiškas, bendras sprendimas, nes taip jūs gaunate geriausią patirtį.

Garis Brotmanas: „Ir tai niekada nepasikeitė jokiuose mūsų pokalbiuose, net ir naudojant specialų greitintuvą. Tai papildymas, o ne pakaitalas“.

Mario Serrafero: „Taip, manau, kad Keithas praėjusiais metais pasakė: „kur bus skaičiavimas, ten bus ir DI“. Ir dabar yra daugiau skaičiavimo“.

Garis Brotmanas: "Daugiau apskaičiuokite kiekviename bloke, tai visiškai teisinga."

Mario Serrafero: „NKadangi kalbame apie šią temą, girdėjome daug palyginimų su „paslaptingu“ 7 nm konkurentu „Android“. Taip, mes vis dar neturime supratimo, kas tai yra“. (kalbama juokais)

Garis Brotmanas: "Neturiu supratimo." (kalbėjo juokais)

Mario Serrafero: „Bet ar galėtumėte mums padėti šiuos palyginimus? Kaip jie buvo matuojami? Į kokius įspėjimus verta atsižvelgti? Ar turite kitų komentarų, kurių galbūt nespėjote išplėsti skaidrėse ar klausimų ir atsakymų skiltyje? Žinau, kad sunku išmatuoti [ir bendrauti] dėl modelių įvairovės, todėl manau, kad taip yra įdomi tema, kurią reikia išplėsti, kad žmonės žinotų, kodėl ne taip lengva juos pasigaminti palyginimai“.

Garis Brotmanas: „Iš tikrųjų tai gana paprasta. Pateiksiu labai paprastą atsakymą apie vieną konkrečią metriką; sausio mėnesį atliksime daugiau lyginamųjų analizių. Daugiau pakalbėsime apie skirtingus tinklus, kurie naudojami skaičiams, kuriais remiamės, matuoti, ir tai būtų standartinė Inception v3. Iš čia mes gauname tą našumą ir supratimą apie konkurencijos vietą. Tačiau kalbant apie tą, apie kurį buvo paskelbta ir kuri yra rinkoje esantys produktai, čia atsiranda 2x ir 3x. iš – 3x buvo prieš 845 m., o 2x yra jų našumo ir našumo būsenos santykinis matas. mūsų“.

Ziadas Asgharas: „Turite turimų įrenginių, iš tikrųjų galite juos įsigyti ir patys atlikti kai kuriuos testus. Bet aš manau, kad vienintelis dalykas, kurio galėčiau apsisaugoti, tai yra laukiniai vakarai, skirti lyginamajam AI. Kai kurie žmonės vartoja labai apibendrintus terminus arba tinklų derinius, kurie jiems gali būti naudingi arba ne. "Ar tai bus gerai suderinta su modaliniu darbo krūviu?" žmonės neatsižvelgia į tai. Kai kurie etalonai, kurie sklandė aplinkui, daro daug daugiau, ir mes esame labai arti, todėl žinokite, kad yra žmonių, kurie verčia tuos etalonus vienaip ar kitaip svyruoti, priklausomai nuo to, ką teikia juos. Štai kodėl daug daugiau kalbama apie faktinius naudojimo atvejus. Taip pat daug daugiau kalbama apie geriausią savo klasėje našumą tuo atveju, o tada – apie tai, kaip tai padaryti greičiau. Manau, kad tai yra visi veiksniai, į kuriuos mes žiūrime. Bet aš manau, kad jis taps geresnis, susilies. Šiuo metu yra daugybė skirtingų variantų. Manau, kad išliks tam tikri etalonai, kurie bus prasmingesni. Šiandien galbūt galėtumėte ginčytis, kad „Inception v3“ šiuo metu yra santykinai geresnė.

Garis Brotmanas: „Kalbant apie tinklus, yra keletas. Yra ResNet, VGG, segmentavimo tinklai, itin didelės skiriamosios gebos tinklai – neapdorotas našumas, kuriuo galėtumėte juos išmatuoti. Reikėtų atimti tokius etalonus kaip įmonės ar subjektai, kurie atlieka AI lyginamąją analizę, ir jie turi kintamų tikslumo, tinklų ir formulių mišinių, jos yra tokios kintančios, kad keičiasi rezultatai savaitė į savaitę. Štai kur tai tikrai Laukiniai Vakarai, ir mes laikomės ištiestos rankos. Mes niekur nededame statymų, nes kai kurių iš šių tinklų faktinis našumas labai skiriasi kurie naudojami naudojimo atvejais, esame įsitikinę, kad vis dar tikrai užimame aukščiausią vietą pagal našumą, palyginti su varzybos. Turėčiau pasakyti ne reitingą, o padvigubėjimą, apie kurį kalbėjome, neapdorotas pasirodymas.

Mario Serrafero: „Vienas iš dalykų, kurie mus domina kaip kūrėjams skirta svetainė, yra mašininio mokymosi demokratizavimas. Akivaizdu, kad turime atviro kodo bibliotekas, kurios yra puikios, visi taip pat siūlo šiuos nuostabius SDK ir yra daug švietimo. Dabar pasiekiama „Android NN“, o „Google“ ką tik išleido ML rinkinys kuris supaprastina procesą. Jūs tiesiog iškviečiate API, pateikite ją savo įvestimi, jie naudoja apmokytą modelį, jums nereikia dėl to jaudintis, jums nereikia apie tai galvoti, jums nereikia žinoti jokios statistikos ar vektorinių skaičiavimų. Kaip manote, kad kraštovaizdis šiuo atžvilgiu pasikeitė ir tapo prieinamesnis, supaprastinta API, supaprastinti dokumentaciją, SDK ir skatinti trečiųjų šalių kūrėjų įtraukimą, o ne tik didelius įmonės?"

Garis Brotmanas: „Juokinga, kai iš tikrųjų orientuojamės į dideles įmones, tai padeda ir mažesniems kūrėjams. Pradėjome nuo patentuoto rinkinio, kai reikėjo programuoti „Snapdragon“, ypač AI paleisti. Tačiau laikui bėgant ir per pastarąsias kelias kartas pridėjome daugiau įrankių. Mes stengiamės rasti pusiausvyrą tarp aukšto lygio abstrakcijos ir naudojimo paprastumo bei žemesnio lygio prieigos, kuriai reikalingas kažkas būti daug išmintingesniems, ypač kai reikia dirbti su kai kuriais mūsų patentuotais branduoliais, pvz., vektoriniu procesoriumi arba NPU. Matome, kad ji vystosi demokratizacijos požiūriu. Turime pagrindinius kūrimo blokus, pvz., Hexagon ir Qualcomm matematikos bibliotekas, bet galbūt šiek tiek aukštesnio lygio API, kuri abstrahuoja bent dalį to sunkaus kėlimo, tačiau kūrėjui suteikia pakankamai lankstumo, kad jis galėtų naudoti savo pasirinktinius operatorius arba šiek tiek pakoreguoti našumą žemesnėje versijoje. lygiu. Taigi portfelis ir toliau bus įtrauktas į daugiau įrankių ir, žinoma, tokių dalykų kaip NN API, kur Onyx yra pavyzdys, kaip galima iš esmės pasakykite: „Štai ką jūs programuojate, kuo išreiškiate savo tinklą“. Kol aparatinė įranga ją palaiko, jūs esate Gerai.

Kaip minėjau savo pristatyme, esame atsakingi už kelių OS aplinką. Yra „Windows“, yra „Linux“, yra „Android“, taigi, tai ne tik „Android“. Kai pažvelgsime į tai, jei ketiname sukurti tam tikrą API, kuri bus SoC, kryžminė SoC arba įvairiose platformose OS požiūriu, turime ieškoti ir išsiaiškinti, kaip rasti bendrumo to, ką kuriame pagal gaubtas. Pavyzdžiui, rinkinys su bibliotekomis ir operatoriaus palaikymu, kurį galima prijungti prie NN API arba Windows ML. Bet, žinoma, mes nebeturime švytuoklės čia, kur niekas iš tikrųjų nežino, ką daryti, pavyzdžiui tiesiogine prasme, nežinodamas. „Nežinau, kokią sistemą naudoti. Ar aš naudoju TensorFlow, ar turėčiau naudoti „Caffe“ ar „Torch“? Ir nežinojimas, ką daryti, kad optimizuotumėte žemesniu lygiu. Taigi visi patenkinti API skambučiu. Dabar, vos per porą metų, lengva įsigilinti. Taigi įrankių yra, nesvarbu, ar tai įprasti atvirojo kodo įrankiai, ar net tokiame portfelyje, kokį siūlome mes ar konkurentai, – tie įrankiai tampa lengviau pasiekiami ir lengviau naudojami.

„Qualcomm“ dirbtinio intelekto variklis ir palaikomos AI sistemos, operacinės sistemos, ekosistemos, funkcijos ir įrenginiai. Šaltinis: Qualcomm.

Mario Serrafero: „Kalbant apie kūrėjų bendruomenes. Paskutinį kartą paminėjome vieną brandžiausių bendruomenių, kurią turime, yra žaidimų bendruomenė, o „Qualcomm“ yra gana gerai į ją įtraukta. Dabar tai labiau nei bet kada matome bendradarbiaudami su žaidimų varikliais, kurie yra reklamuojami ir parduodami. Taigi mes kalbėjome apie tai AI kontekste ir kaip jis ten atsiranda.

Mišaalas Rahmanas: „Jūs kalbėjote apie tai, kaip norite daugiau investuoti per ateinančius 12 mėnesių. Tai buvo tada, kai paskutinį kartą buvome čia."

Mario Serrafero: „Konkrečiai žaidimų kūrėjų bendruomenėje, plečiame tai ir tai, ką matome šiandien.

Garis Brotmanas: „Nepamenu konkretaus komentaro apie investavimą į žaidimų bendruomenę, bet jei pažvelgtumėte į kategoriją, kurią matėme vairuodami specialaus pagreičio poreikis, o žaidimai yra to sudedamoji dalis, tačiau tai nebūtinai yra pagrindinis naudojimo atvejis – VR kaip pavyzdys. Turint turtingą, įtraukiantį VR patirtį, kiekvienas branduolys iš esmės yra svertas. Atliekate grafikos apdorojimą GPU, vaizdinį apdorojimą vektoriniame procesoriuje ir to reikia paimkite vieną ar kelis tinklus ir paleiskite juos atskirai specialiu greitintuvu, nesijaudindami dėl lygiagretumo poveikį. Tai viena iš priežasčių, paskatinusių mus tam tikro pagreičio keliu. Neturiu daug informacijos apie tai, kaip AI šiandien naudojamas žaidimuose. Su agentais dirbama daug – kuriami agentai, kurie kovotų prieš jus arba jus mokytų.

Mario Serrafero: „Kaip tradicinis AI žaidimuose“.

Garis Brotmanas: "Būtent taip. Bet labiau pagrįstas neuroniniais tinklais.

Mario Serrafero: – Taip, ne Minimax.

Garis Brotmanas: „Dalis Ziad atsakomybės taip pat yra XR strategijos valdymas“.

Ziadas Asgharas: „Jei pažvelgsite į XR šiandien, mes pristatėme naujus įrenginius, kurie yra „viskas viename“ HMD su visu 6DOF įjungimu. Tokie įrenginiai kaip „Oculus Quest“, kuris iš tikrųjų buvo paleistas kartu su „Snapdragon 835“, todėl pradedame pasiekti labai gerą tašką, kad iš tikrųjų išnaudotume visas XR įrenginių galimybes. Anksčiau kai kurie įrenginiai tikrai nesuteikdavo tos nesugadintos patirties, nes kai kurie žmonės iš to nepasinaudojo geriausiomis patirtimis. Manau, kad XR dabar sekasi puikiai. Į ką mes taip pat žiūrime ateityje, nes jis derinamas su 5G, tai leidžia jums dabar jūsų įrenginys, kuris iš tikrųjų yra daug mobilesnis, o tai reiškia, kad galite įsivaizduoti, kad iš tikrųjų vaikštote a gatve. Ir tada turėti tokią nuorodą kaip 5G reiškia, kad kaip „Google Lens“ demonstracinė versija, kurią Gary parodė. Dabar įsivaizduokite, kad jei dėvėtumėte kokius nors „Google“ akinius ar kažką panašaus ir galėtumėte įnešti informacijos apie tai, į ką žiūrite savo akimis, dabar turite naudojimo atvejį, kuris tikrai gali būti labai geras įtikinamas. Manau, kad tai yra ilgalaikės investicijos, apie kurią kalbate, kryptis.

Tačiau šiuo metu manome, kad esame labai geros būklės, kalbant apie XR ir visas įvairias bendroves, kurios pradėjo naudoti XR. „Oculus Go“ taip pat yra pagrįstas „Snapdragon 820“, todėl manau, kad pradedame pasiekti labai gerą tašką, kai žmonės jį renkasi ir su juo daro daug dalykų. Kitas etapas, kaip jau minėjau, yra pradėti diegti 5G ryšį, kurį atliksime ir vėliau kad, žinoma, AR ir kai kurie dalykai, kuriems net reikės daug daugiau našumo, tačiau riboti galia. Ir tai bus labai sudėtinga, ir manau, kad su tuo, apie ką šiandien kalbėjome, „Qualcomm“ tikriausiai yra geriausias, kalbant apie bet kurį iš šių naudojimo atvejų. Jei pažvelgsite į grafiką, jei palyginsite kurį nors iš konkurentų, pamatysite, kad mūsų našumas vienam galios vienetui yra geriausias savo klasėje. Dėl to XR svarbiausia yra terminiai, tvarus veikimas, ir šiuo atžvilgiu mes tikrai esame priekyje – tai yra priežastis, kodėl žmonės mus naudoja XR.

„Oculus Go“ maitina „Qualcomm Snapdragon 821“ mobilioji platforma.

Mario Serrafero: „Nuo praėjusių metų matėme, kad Hexagon 685 DSP pagaliau pasiekė aukščiausios klasės vidutinės klasės 710 ir tinkamas vidutinis diapazonas su 670 ir 675. Taigi dabar „Hexagon Vector Extensions“ skleidžiasi pasroviui, o kiti konkurentai to nedaro su savo neuroniniais apdorojimo įrenginiais. Kaip manote, kad šios patirties išplėtimas, ir aš norėjau paklausti, ar praeityje jūs matėte, kad dirbtinio intelekto našumo skirtumai iš viso turi įtakos? Nes mes vis dar esame ankstyvoje AI diegimo stadijoje.

Ziadas Asgharas: „Aš žiūriu į bendrą planą. Jei ieškote nesugadinto geriausio savo klasėje našumo, jis bus aukščiausios klasės. Tai, ką darome, yra pasirinktinai išnaudojame kai kurias šešiakampio galimybes ir mažiname jas. Pirmasis AI variklis arba pirmasis šešiakampis buvo paleistas su Snapdragon 820. Taigi mes sumažinome jį iki Snapdragon 660 ir 670, o 710 taip pat turi. Taigi, mūsų planas yra pamatyti, kaip tai prasiskverbia į būsimas patirtis.

Kaip AI variklis, turime pagrindinius senus komponentus: centrinį procesorių, GPU, šešiakampį tenzorių, šešiakampį vektorių ir skaliarą. Tai, ką mes darome, yra pasirinktinai įtraukiame to dalis į planą, nes matome, kad šie gebėjimai mažėja ir patenka į žemesnės pakopos ausines. Iš tikrųjų pamatysite, kai eisime toliau šiais metais. pamatysi, padarysime daugiau. 4G / 5G aukščiausiojo lygio susitikime pristatėme „Snapdragon 675“. Mes kalbėjome apie tai, kad tai bus 675, ir ką pamatysite, nes tokių naudojimo atvejų vis dažniau kaip šiandien parodėme su ArcSoft ir visais kitais vaikinais, mes iš tikrųjų pateiksime šias galimybes žemesnė. Žemesnėje pakopoje galėsite paleisti tą naudojimo atvejį, bet kad galėtumėte gauti tinkamą galios profilį, kaip ir aš apie ką kalbėjome anksčiau, jei norite, kad našumas būtų nuolatinis, norite, kad tas konkretus blokas ateitų žemesnė. Taigi vėlgi, geriausi savo klasėje rezultatai bus aukštesni, bet kai lėksite, labai pablogės arba graduosis…“

Mario Serrafero: – Galima sakyti, gradientinis nusileidimas. (kalbama juokais)

Ziadas Asgharas: "Taip, tiksliai. Taip elgiamės ir su kitomis technologijomis, kurios taip pat įtrauktos į veiksmų planą, ir dirbtinis intelektas šia prasme nelabai skirsis. Tikriausiai tai yra vienas skirtumas, galbūt tai, iš kur jūs ateinate, nes greičiausiai jis krenta greičiau naudojant kitas technologijas, kurias įtraukėme į veiksmų planą, todėl su tuo pastebėjimu sutikčiau su."


Jei norite sužinoti daugiau apie AI „Qualcomm“ mobiliosiose platformose, rekomenduojame perskaityti mūsų praėjusių metų interviu su Gary Brotman. Galite pradėti nuo 1 dalis mūsų interviu arba eikite į 2 dalis.

Visa šiame interviu rodoma grafika paimta iš Gary Brotmano pristatymo „Snapdragon Tech Summit“ metu. Galite peržiūrėti skaidres čia.