Intervija: Qualcomm par AI un Snapdragon 855 Hexagon 690 DSP

Kad Qualcomm atklāja savu jauno Snapdragon 855 mobilā platforma, viņi minēja būtiskus uzlabojumus visos mobilās skaitļošanas aspektos. Parastam lietotājam tas ir viegli saprotams galalietotāja priekšrocības, ko nodrošina CPU un GPU uzlabojumi ko Qualcomm izgatavoja Snapdragon 855. Labāka CPU veiktspēja nozīmē, ka lietotnes tiek ielādētas ātrāk, un labāka GPU veiktspēja nozīmē labāku kadru ātrumu spēlējot. Lietotājiem ir mazāk intuitīvi saprotams AI (mākslīgais intelekts), un jo īpaši mašīnmācīšanās metodes, ko lietotnē un pakalpojumos arvien vairāk izmanto, piemēram, mākslīgo neironu tīkliem. Qualcomm guva milzīgus ieguvumus AI darba slodzes veiktspējā ar Snapdragon 855, pateicoties skaitļošanas uzlabojumiem visās jomās, un jo īpaši, pateicoties uzlabotajam Hexagon 690 DSP. Mēs sēdējām kopā ar Geriju Brotmanu, Qualcomm AI un mašīnmācīšanās stratēģijas un produktu plānošanas vadītāju, un Ziadu Asgharu, uzņēmuma viceprezidentu. Snapdragon Roadmap Planning un AI, XR, konkurētspējīga stratēģija uzņēmumā Qualcomm, lai uzzinātu vairāk par Qualcomm veiktajiem uzlabojumiem AI darba slodzēs.

---

Mario Serrafero: "Tātad, jaunais DSP. Pagājušajā gadā es jums jautāju par uzbrukuma stratēģiju attiecībā uz to, kā Qualcomm virzīja, reklamēja, reklamēja un komunicētu jo īpaši DSP un HVX. Tolaik kā AI bloks lielākajai daļai lasītāju un patērētāju tas joprojām bija salīdzinoši jauns. Tāpēc mēs brīnāmies, kā jūs redzējāt, kā šī attīstība kopš tā laika ir attīstījusies līdz ar 845 tālāku reklamēšanu.

Gerijs Brotmens: "Pirmkārt un galvenokārt, kad mēs sākām to darīt ar 820, tas joprojām bija ļoti orientēts uz CPU un GPU un izmantoja DSP un vektoru apstrādes iespējas tam patiešām radās tāpēc, ka Google cenšas virzīties uz TensorFlow un 8 bitu matemātika. Tāpēc mēs patiešām izstiepām kājas DSP vai, teiksim, vektoru procesoros. Ņemot vērā sešstūrī esošā vektoru procesora briedumu un veidu, kā mēs varējām tik ātri virzīt šo ceļvedi uz priekšu nākamajos divos paaudzes, kā arī mūsu redzētie lietošanas gadījumi, kas tajā laikā pamata klasifikācijas tīkli bija diezgan vienkārši un nebija daudz heft. Tie var darboties labi ar 8 bitu matemātiku. Īpašs paātrinātājs pat pagājušajā gadā radīja risku, ka pamatā tika piešķirta platība kaut kam, kas var netikt izmantots. Lietošanas gadījumu saplūšana, un tas ir jebkas no standarta vienas kameras, superizšķirtspējas vai segmentācijas reāllaikā. Dažos gadījumos šīs lietas notiek vienlaikus, un pieprasījums pēc vismaz zināma līmeņa īpaša paātrinājuma jūs varat novērst un joprojām lasīt ciklus vektorprocesorā vai pat GPU. Tas bija īstais brīdis.

Tas noteikti ir kaut kas tāds, kas mums bija jāplāno daudz agrāk nekā tad, kad mēs runājām pagājušajā reizē, bet es domāju, ka visi ir iesaistījušies šis uzņēmums liek derības, ka viņi precīzi vai gandrīz precīzi zina, kāda būs šī darba slodze. Kāda veida precizitātei ir jābūt nepieciešamai un vai budžetā bija pietiekami daudz aprēķinu, lai apmierinātu gaidāmos lietošanas gadījumus. Mēs esam diezgan apzināti šajā jautājumā — Qualcomm vienmēr ir bijis vērsts uz lietojuma gadījumiem — un mēs nevēlējāmies pastāv risks, ka tiks izmantots īpašs paātrinājums, kas netiktu izmantots, jo tas varētu būt novecojis pēdējā laikā cikls. Mēs redzam pietiekami daudz vispārējās konvolūcijas vien, ko īpašs akselerators var paveikt fantastisku darbu. Atkal, ciklu atbrīvošana citur. Runājot par stratēģiju, kas mums ir ar šo jauno paātrinātāju: tā ir īpaša, tā ir jauna arhitektūra. Tas nav sešstūra atvasinājums. Bet, ja jūs šodien domājat par tīklu, ir dažas nelinearitātes funkcijas, kas nedarbojas labi ar dažiem īpašiem paātrinājumiem.

Mario Serrafero: "Jā, sigmoid, ReLU -"

Gerijs Brotmens: "Tieši tā, Softmax. Un jums tie ir jāievieto citur vai centrālajam procesoram. Bet mūsu gadījumā, kā mēs to esam izveidojuši zem pārsega, DSP faktiski ir kontrole. Tas nosaka, kur darbojas tīkls un kur darbojas slāņi, un var izlemt, vai ir noteiktas lietas, kurām vajadzētu darboties DSP kā atkāpšanās iespēja, salīdzinot ar tensoru procesoru. Tātad šī savienošana pārī mums patiešām bija ļoti jēga. Bet tas nemazina mūsu uzskatus un mūsu stratēģiju, ka katram mūsu SoC galvenajam kodolam ir a lomu, tāpēc mēs optimizējam visas darbības, tomēr joprojām ir daudz mainīgumu, un tas arī turpināsies Turpināt."

Mario Serrafero: "Vēl viena tēma, par kuru mēs vēlamies runāt, ir lietošanas gadījumi. Kā jūs teicāt, Qualcomm ir ļoti orientēts uz lietojuma gadījumiem, mēs esam redzējuši, ka AI ir nonācis mobilajās ierīcēs trīs galvenajās jomās: runas atpazīšana, secības prognozēšana, piemēram, ar virknēm un rakstīšanu, un acīmredzami datorredze, piemēram, AI filtri, [un objekts atzīšana]. Datorredze eksplodēja, tagad jūs to redzat visur. Esmu redzējis, ka ar runas atpazīšanu katram ir savs AI palīgs, katram ir savs palīgs. Tagad viss, ko var paveikt malā ar nelielu latentumu un perfektu drošību. Bet kas notiks tālāk ar mašīnmācības lietošanas gadījumiem, un vai visus šos lietošanas gadījumus izstrādās lielie pasaules uzņēmumi — visi Snapchats pasaulē, Facebook? Kā jūs redzat to ripošanu?"

Gerijs Brotmens: "Es nedomāju, ka varu norādīt uz slepkavas lietošanas gadījumu. Taču iespējas nodrošina lielāku skaitļošanas sarežģītību, un redzes gadījumā ievades izšķirtspēja var būt augstāka. Jūs nestrādājat ar zemas izšķirtspējas attēliem, lai izmantotu bokeh efektu. Iepriekš citā intervijā bija diskusija, piemēram, 4K straumēšana. Es nedomāju, ka tas ir iespējams, bet gan izstrādātāji, ar kuriem mēs sadarbojamies, neatkarīgi no tā, vai tie ir lieli uzņēmumi, piemēram, Google vai mūsu programmatūras izstrādes partneri, kuri faktiski veido algoritmus, kas nodrošina daudz no šīm mobilajām funkcijām, viņi vienkārši vēlas spiediet vairāk. Viņi vēlas iet tālāk. Ja ir kaut kas, ko es redzētu saistībā ar nākamajām darbībām, iespējams, tas būtu mazāk par to, kas notiek virs līnijas vai lietotnes līmenī. vairāk par to, kas notiek sistēmā, piemēram, produkta darbības uzlabošana, jaudas pārvaldība un pat kameras konveijerā, ne tikai to. Jūs minējāt audio un to, cik atslēgvārdu jūs gatavojaties atbalstīt, vai arī varat veikt trokšņu slāpēšanu ierīcē. Atslēgvārda lieta ir interesanta, jo nav viegli izveidot bibliotēku — jums ir ierobežota atmiņa. Tāpēc joprojām būs līdzsvars starp to, kas ir lokāls, un to, kas notiks mākonī."

Ziads Ašgars: "Es varu nedaudz piebilst. Tātad vismaz divas jomas, kurās tas ievērojami pieaug, šodien ir audio un attēlveidošana. Mēs redzam, ka tam ir daudz lietošanas gadījumu. Džeks par to runāja no kameras perspektīvas, mums ir AI dzinējs, kurā jūs varat daudz no tā izmantot attēlveidošanas izmantošanas gadījumos. Daži no tiem, kas tika rādīti šodien. Un tad, ja paskatās uz audio, mēs par to tik daudz nerunājām, bet faktiski pievienojām dažas audio iespējas arī audio blokam. Mēs varam veikt labāku balss aktivizēšanu trokšņainā vidē. Mēs varam veikt labāku trokšņu slāpēšanu [attēlveidošanā]. Visas šīs spējas būtībā jau notiek. Ir partneri, kurus Gerijs šodien parādīja interneta pakalpojumu sniedzējam, ir daudz vairāk tādu, kas nāk. Tāpēc es domāju, ka tās ir divas dimensijas, kurām mēs šodien vairāk koncentrējamies."

Gerijs Brotmens: "Un tad nākamais solis — es neplānošu, kad tas notiks — vai tagad ir pietiekami daudz aprēķinu, kur Mācīšanās ierīcē un eksperimenti saistībā ar faktisko mācīšanos ierīcē, visticamāk, notiks šajā nākamajā cikls."

Mario Serrafero: "Iespējams, šī ir tēma, par kuru ir daudz patīkamāk apspriest, un tas ir fakts, ka Qualcomm pieturas pie Hexagon DSP monikera un HVX, kamēr citi uzņēmumi izvēlas "neirālu" tā un tā. Kā Qualcomm redz šo neatbilstību un šīs dažādās stratēģijas un pieejas, galvenokārt izmantojot mārketingu, bet mēs varam nedaudz vēlāk iedziļināties par neviendabīgo aprēķinu salīdzinājumā ar konkrētiem bloka bitiem kā labi."

Gerijs Brotmens: "Tā kā Hexagon DSP jau ir uzkrāts pamatkapitāls, uzreiz rodas doma, ka mēs tikai paplašinām savu DSP stratēģiju. Faktiski attiecībā uz zīmolu, ja paskatās uz visiem trim procesoriem, jūsu skalāru, vektoru un tagad jūsu speciālo tenzoru paātrinātāju, tie nav visi DSP. Hexagon patiešām ir augstāka līmeņa zīmols nekā tikai DSP. Ir daži DSP. Es domāju, ka uz mārketinga jautājumiem, iespējams, ir nedaudz grūtāk atbildēt, jo katrs reģions ir atšķirīgs. Ķīna ir ļoti orientēta uz NPU, jo tas ir nosaukums, kas tika ieviests pagājušajā gadā, un šķiet, ka tas ir iesakņojies. Es neteiktu, ka tas būtu strādājis citur pasaulē. Google ir tensoru procesors, un šķiet, ka tensors rezonē."

Mario Serrafero: "Daudziem cilvēkiem ir savi dažādi vārdi."

Gerijs Brotmens: "Galu galā tas ir atkarīgs no tā, ko OEM vēlas darīt. Ja tas ir svarīgi viņu klientiem, viņiem ir jāizdomā, kā viņi var izmantot šīs apstrādes iespējas un atšķirt to pēc iespējām. Mūsu dzinējs un, manuprāt, liela daļa no apstrādes iespējām, kas mums ir, joprojām būtu ļoti vektora un tensorcentrisks kopējās kombinācijas ziņā. Pati speciālā apstrāde, veids, kā tā veic matricas reizināšanu, ir tāda paša veida īpašais procesors, ko [izmanto] NPU. Mārketinga jautājums ir interesants, un es aizmirstu, kāda bija Kīta atbilde?

Ziads Ašgars: "Viņa atbilde bija: "Jūs varat to saukt, kā vēlaties, lai varētu pārdot vairāk produktu."

Gerijs Brotmens: "Tas bija gandrīz viss; tā bija pareizi, tā bija ļoti rupja atbilde."

Ziads Ašgars: "Manuprāt, Gerijs to ļoti labi aptver. Daži cilvēki izmanto šo nosaukumu kā terminu tādā veidā, kas gandrīz norāda vai netieši norāda, ka tas attiecas tikai uz šo bloku. Bet mēs redzam, ka visa šī neviendabīgā pieeja, kas ļauj izmantot CPU vai GPU, vai sešstūra tensoru vektors, sniedz jums dažādus kompromisus visā jaudas un veiktspējas precizitātes spektrā, un tas ir tas, kas jums nepieciešams šodien. Tā kā mēs nezinām, kādai lietojumprogrammai ir nepieciešama precizitātes pakāpe, kam nepieciešama ilgstoša veiktspēja vai kam tā nav nepieciešama. Tāpēc mēs uzskatām, ka tas ir pilnīgs, vispārējs risinājums, jo tā jūs iegūsit vislabāko pieredzi.

Gerijs Brotmens: "Un tas nekad nav mainījies nevienā no mūsu sarunām, pat ar īpašu paātrinātāju. Tas ir papildinājums, nevis aizstājējs."

Mario Serrafero: "Jā, es domāju, ka tas bija Kīts pagājušajā gadā, kurš teica: "kur ir aprēķins, tur būs AI." Un tagad ir vairāk aprēķinu."

Gerijs Brotmens: "Vairāk aprēķinu katrā blokā, tas ir tieši pareizi."

Mario Serrafero: "NTā kā mēs runājam par šo tēmu, esam dzirdējuši daudzus salīdzinājumus ar “noslēpumaino” 7 nm konkurentu operētājsistēmā Android. Jā, mums joprojām nav ne jausmas, kas tas ir." (runāts jokā)

Gerijs Brotmens: "Nav ne jausmas." (izrunājies pa jokam)

Mario Serrafero: "Bet vai jūs varētu mūs saprast par šiem salīdzinājumiem? Kā tie tika mērīti? Kādus brīdinājumus ir vērts apsvērt? Vai ir kādi citi komentāri, kurus, iespējams, jums, puiši, nebija laika izvērst slaidos vai jautājumu un atbilžu sadaļā? Es zinu, ka ir grūti izmērīt [un sazināties] dažādu modeļu dēļ, tāpēc es domāju, ka tā ir interesants temats, ko izvērst, lai ļautu cilvēkiem uzzināt, kāpēc tos nav tik vienkārši izveidot salīdzinājumi."

Gerijs Brotmens: "Patiesībā tas ir diezgan vienkārši. Es sniegšu jums ļoti vienkāršu atbildi par vienu konkrētu metriku; janvārī mēs veiksim vairāk etalonuzdevumu. Mēs runāsim vairāk par dažādiem tīkliem, kas tiek izmantoti, lai izmērītu skaitļus, uz kuriem mēs to balstījam, un tas būtu standarta Inception v3. Šeit mēs iegūstam šo sniegumu un mūsu izpratni par to, kur atrodas konkurence. Bet, runājot par to, kas ir paziņots un tiek piedāvāts ar produktiem tirgū, šeit nāk 2x un 3x no — labi, 3x bija pretrunā ar to, kas mums bija 845. gadā, savukārt 2x ir viņu veiktspējas un veiktspējas relatīvais rādītājs. mūsējiem."

Ziads Ašgars: "Jums ir pieejamas ierīces, jūs faktiski varat tās iegādāties un veikt dažas pārbaudes pats. Bet es domāju, ka vienīgais, no kā es atturētos, ir savdabīgi savvaļas Rietumi etalonuzdevuma AI jomā. Daži cilvēki lieto ļoti vispārīgus terminus vai tīklu sajaukumu, kas viņiem var sniegt kādu konkrētu labumu vai nē. "Vai tas labi saskanēs ar modālo darba slodzi?" tas nav kaut kas tāds, ko cilvēki ņem vērā. Daži etaloni, kas ir bijuši pieejami, to dara daudz vairāk, un mēs esam ļoti tuvu, tāpēc ziniet, ka ir cilvēki, kas liek šiem etaloniem vienā vai otrā veidā mainīties atkarībā no tā, kas dod priekšroku viņiem. Tāpēc tas ir daudz vairāk par faktiskajiem lietošanas gadījumiem. Tas ir arī daudz vairāk par labāko savā klasē veiktspēju konkrētajam lietošanas gadījumam, un tad tas ir par to, kā to paveikt ātrāk. Es domāju, ka tie ir visi faktori, uz kuriem mēs skatāmies. Bet es domāju, ka tas kļūs labāks, tas saplūdīs. Šobrīd ir pieejamas dažādas iespējas. Es domāju, ka jums būs noteikti kritēriji, kas būs saprātīgāki. Šodien, iespējams, jūs varētu apgalvot, ka Inception v3 šobrīd ir salīdzinoši labāks.

Gerijs Brotmens: "Tīklu ziņā ir daži. Ir ResNet, VGG, segmentācijas tīkli, izcilas izšķirtspējas tīkli — neapstrādāta veiktspēja, ar kuru jūs varat tos izmērīt. Tas ir jāņem vērā attiecībā uz etaloniem, piemēram, uzņēmumiem vai organizācijām, kas veic AI etalonuzdevumus, un ir mainīgas precizitātes, tīklu un formulu kombinācijas, tās ir tik mainīgas, ka mainās rezultāti katru nedēļu. Šeit patiesi ir mežonīgie rietumi, un mēs turamies rokas stiepiena attālumā. Mēs nekur neliekam savas likmes, jo dažu šo tīklu faktiskā veiktspēja ir ļoti atšķirīga. kuras tiek izmantotas lietošanas gadījumos, esam pārliecināti, ka joprojām esam augstākajā vietā veiktspējas ziņā salīdzinājumā ar konkurenci. Man jāsaka nevis reitings, bet gan dubultošana, par ko mēs runājām, neapstrādāts sniegums."

Mario Serrafero: "Viens no priekšmetiem, kas mūs interesē kā vietne galvenokārt izstrādātājiem, ir mašīnmācības demokratizācija. Acīmredzot mums ir lieliskas atvērtā pirmkoda bibliotēkas, visi piedāvā arī šos apbrīnojamos SDK, un ir daudz izglītības. Un tagad ir pieejams Android NN, un Google tikko izlaida ML komplekts kas vienkāršo procesu. Jūs vienkārši izsaucat API, ievadiet to, viņi izmanto apmācītu modeli, un jums par to nav jāuztraucas, jums par to nav jādomā, jums nav jāzina nekāda statistika vai vektoru aprēķini. Kā jūs redzat, ka ainava šajā ziņā ir attīstījusies, padarot to pieejamāku, vienkāršojot API, vienkāršot dokumentāciju, SDK un veicināt trešo pušu izstrādātāju iekļaušanu, ne tikai lielu kompānijas?"

Gerijs Brotmens: "Tas ir smieklīgi, kad mēs koncentrējamies uz lieliem uzņēmumiem, tas palīdz arī mazākiem izstrādātājiem. Mēs sākām ar vairāk patentētu steku, kad runa bija par Snapdragon programmēšanu, īpaši AI darbināšanai. Taču laika gaitā un pēdējās pāris paaudzēs esam pievienojuši vairāk rīku. Mēs cenšamies panākt līdzsvaru starp augsta līmeņa abstrakciju un lietošanas vienkāršību un zemāka līmeņa piekļuvi, kam nepieciešams kāds būt daudz gudrākam, it īpaši, ja runa ir par dažiem mūsu patentētajiem kodoliem, piemēram, vektoru procesoru vai NPU. Mēs redzam, ka tā attīstās no demokratizācijas viedokļa. Mums ir pamata veidošanas bloki, piemēram, Hexagon un Qualcomm matemātikas bibliotēkas, bet varbūt nedaudz augstāka līmeņa API, kas abstrahē vismaz daļu no šīs smagās slodzes, taču sniedz izstrādātājam pietiekami daudz elastības, lai viņš varētu izmantot savus pielāgotos operatorus vai varētu nedaudz uzlabot veiktspēju zemākajā līmenī. līmenī. Tāpēc portfelī turpināsies vairāk rīku un noteikti tādas lietas kā NN API, kur Onyx ir piemērs tam, lai būtībā sakiet "šeit ir tas, ko jūs programmējat, ar ko jūs izpaužat savu tīklu." Kamēr aparatūra to atbalsta, jūs esat labi.

Kā jau minēju mūsu prezentācijā, mēs esam atbildīgi par vairāku OS ainavu. Ir Windows, ir Linux, ir Android, tātad tas neattiecas tikai uz Android. Ja mēs to aplūkosim, ja mēs izveidosim sava veida API, kas būs SoC, cross-SoC vai vairāku platformu no OS viedokļa, mums ir jāmeklē un jāredz, kā atrast kopību tajā, ko veidojam saskaņā ar kapuci. Kā piemēru steks ar bibliotēkām un operatora atbalstu, kuru var pievienot NN API vai Windows ML. Bet, protams, mēs esam aizgājuši no tā, ka svārsts ir šeit, kur neviens īsti nezina, ko darīt, piemēram burtiski, nezinot. “Es nezinu, kādu ietvaru izmantot. Vai es izmantoju TensorFlow, vai man vajadzētu izmantot Caffe vai Torch? Un nezinot, ko darīt, lai optimizētu zemākā līmenī. Tātad visi ir apmierināti ar API zvanu. Tagad, tikai pāris gadu laikā, ir viegli iedziļināties. Tātad rīki ir pieejami neatkarīgi no tā, vai tie ir plaši izplatīti atvērtā pirmkoda rīki vai pat tādā portfelī, kādu piedāvājam mēs vai konkurenti, šie rīki kļūst vieglāk pieejami un vieglāk lietojami.

Mario Serrafero: "Runājot par izstrādātāju kopienām. Iepriekšējā reizē mēs minējām vienu no visnobriedušākajām kopienām, kas mums ir, ir spēļu kopiena, un Qualcomm tajā ir diezgan labi iestrādāts. Tagad mēs to redzam vairāk nekā jebkad agrāk ar partnerattiecībām ar spēļu dzinējiem, kas tiek reklamēti un tirgoti. Tāpēc mēs par to runājām AI kontekstā un par to, kā tas tur parādās.

Mišals Rahmans: "Jūs runājāt par to, kā vēlaties ieguldīt vairāk nākamo 12 mēnešu laikā. Tas bija pēdējā laikā, kad bijām šeit."

Mario Serrafero: "Īpaši spēļu izstrādātāju kopienā, kaut kā paplašinot to un to, ko mēs redzam šodien."

Gerijs Brotmens: "Es neatceros konkrētu komentāru par investīcijām spēļu kopienā, bet, ja paskatās uz kategoriju, kuru mēs redzējām braucam nepieciešamība pēc īpaša paātrinājuma, un spēlēšana ir tā sastāvdaļa, taču tas ne vienmēr ir galvenais lietošanas gadījums — VR kā piemērs. Bagātīgā, ieskaujošā VR pieredzē katrs kodols pamatā tiek izmantots. Jūs veicat grafikas apstrādi GPU, vizuālo apstrādi ar vektoru procesoru, un tas ir nepieciešams paņemiet vienu vai vairākus tīklus un palaidiet tos atsevišķi, izmantojot īpašu paātrinātāju, neuztraucoties par vienlaicīgumu ietekme. Tas ir viens no iemesliem, kas mūs mudināja uz speciāla paātrinājuma ceļu. Man nav daudz informācijas par to, kā AI mūsdienās tiek izmantots spēlēs. Ir daudz jāstrādā ar aģentiem — tiek izstrādāti aģenti, lai cīnītos pret jums vai mācītu jūs."

Mario Serrafero: "Tāpat kā tradicionālais AI spēlēs."

Gerijs Brotmens: "Tieši tā, pareizi. Bet vairāk balstīta uz neironu tīklu."

Mario Serrafero: "Jā, ne Minimax."

Gerijs Brotmens: "Daļa no Ziad atbildības ir arī XR stratēģijas vadīšana."

Ziads Ašgars: "Ja paskatās uz XR šodien, mēs esam izlaiduši jaunas ierīces, kas ir viss vienā HMD ar pilnu 6DOF iespējotu. Ierīces, piemēram, Oculus Quest, kas faktiski tika palaistas kopā ar Snapdragon 835, tāpēc mēs sākam sasniegt ļoti labu punktu, lai faktiski izmantotu visas XR ierīču iespējas. Agrāk dažas ierīces īsti nesniedza tik senatnīgu pieredzi, jo daži cilvēki no tām nav guvuši vislabāko pieredzi. Es domāju, ka XR tagad darbojas lieliski. Tas, ko mēs arī skatāmies nākotnē, apvienojot to ar 5G, ir tas, ka tas ļauj jums tagad jūsu ierīce, kas patiesībā ir daudz mobilāka, kas nozīmē, ka varat iedomāties, ka patiesībā staigājat pa a iela. Un tad, ja ir tāda saite kā 5G, tas nozīmē, ka, piemēram, Google Lens demonstrācija, ko Gerijs parādīja. Tagad iedomājieties, ja jūs valkātu Google brilles vai kaut ko tamlīdzīgu un jūs varētu informācija par to, uz ko skatāties caur savām acīm, tagad jums ir lietošanas gadījums, kas patiešām varētu būt ļoti neatvairāms. Es domāju, ka tieši tur ir runa par ilgtermiņa investīcijām, tādā virzienā tas ir.

Taču šobrīd mēs uzskatām, ka esam ļoti labā stāvoklī attiecībā uz XR un visiem dažādajiem uzņēmumiem, kas ir uzsākuši darbu ar XR. Oculus Go pamatā ir arī Snapdragon 820, tāpēc es domāju, ka mēs sākam sasniegt ļoti labu punktu, kad cilvēki to paņem un dara daudzas lietas ar to. Un nākamais posms, kā jau minēju, ir, ka mēs sākam ieviest 5G savienojumu, ko mēs darīsim un pēc tam vēl tālāk ka, protams, AR un dažas lietas, kas pat prasīs daudz vairāk veiktspējas ziņā, tomēr ierobežotas jauda. Un tas būs ārkārtīgi sarežģīti, un es domāju, ka, ņemot vērā to, par ko mēs šodien runājām, Qualcomm, iespējams, ir labākais, lai veiktu kādu no šiem lietošanas gadījumiem jaudas ziņā. Ja skatāties uz grafiku, ja salīdzināsit kādu no konkurentiem, jūs redzēsit, ka mūsu veiktspēja uz jaudas vienību ir vislabākā savā klasē. Un tā rezultātā XR ir svarīgi termiskie elementi, ilgstoša veiktspēja, un šajā ziņā mēs esam patiešām priekšā — tas ir iemesls, kāpēc cilvēki izmanto mūs XR.

Mario Serrafero: "Kopš pagājušā gada mēs esam redzējuši, ka Hexagon 685 DSP beidzot sasniedza augstākās klases vidējo diapazonu ar 710 un pareizu vidējo diapazonu ar 670 un 675. Tātad tagad mēs panākam, ka sešstūra vektora paplašinājumi nonāk lejup pa straumi, turpretim citi konkurenti to nedara ar savām neironu apstrādes vienībām. Kā jūs redzat, ka šīs pieredzes paplašināšana, un es gribēju jautāt, vai agrāk jūs redzējāt, ka AI veiktspējas atšķirības vispār ietekmē? Jo mēs joprojām esam agrīnā AI ieviešanas stadijā."

Ziads Ašgars: "Es skatos uz kopējo ceļvedi. Ja meklējat senatnīgu labāko savā klasē veiktspēju, tas būs augstākās klases līmenī. Mēs selektīvi izmantojam dažas sešstūra iespējas un pazeminām tās. Pirmais AI dzinējs jeb pirmais Hexagon tika iedarbināts ar Snapdragon 820. Tāpēc mēs to esam samazinājuši līdz Snapdragon 660 un 670, un tas ir pieejams arī 710. Tātad, mūsu plāns ir redzēt, kā tas iekļūst gaidāmajā pieredzē.

Kā mākslīgā intelekta dzinējam mums ir pamata vecie komponenti: CPU, GPU, sešstūra tensors, sešstūra vektors un skalārs. Mēs selektīvi iekļaujam tās daļas tālāk ceļvedī, jo redzam, ka šīs spējas samazinās un nonāk zemāka līmeņa austiņās. Jūs to redzēsit, kad mēs ejam tālāk gadā. redzēsi, ka mēs to darīsim vairāk. Mēs izlaidām Snapdragon 675 4G/5G samitā. Mēs runājām par to, ka tas nonāks līdz ar 675, un jūs redzēsit, jo šie lietošanas gadījumi kļūst arvien biežāki. plaši izplatīts, kā mēs šodien parādījām ar ArcSoft un visiem citiem puišiem, mēs faktiski nodrošināsim šīs iespējas zemāks. Apakšējā līmenī jūs varēsit palaist šo lietošanas gadījumu, bet, lai iegūtu pareizo jaudas profilu, piemēram, es par ko tika runāts iepriekš, ja vēlaties nodrošināt ilgstošu veiktspēju, vēlaties, lai šis konkrētais bloks nāk zemāks. Tātad arī šajā klasē vislabākais sniegums būs augstāks, bet, pazeminoties, būs liela degradācija vai gradācija…”

Mario Serrafero: "Var teikt, ka nolaišanās ar slīpumu." (runāts jokojot)

Ziads Ašgars: "Jā, tieši tā. Tā mēs rīkojamies ar citām ceļvedī iekļautajām tehnoloģijām, un AI šajā ziņā īpaši neatšķirsies. Tā, iespējams, ir viena no atšķirībām, iespējams, no kurienes jūs nākat, jo, iespējams, tā nolaižas ātrāk izmantojot citas tehnoloģijas, kuras esam iekļāvuši ceļvedī, tāpēc šim novērojumam es piekrītu ar."

---

Ja vēlaties uzzināt vairāk par AI Qualcomm mobilajās platformās, iesakām izlasīt mūsu pagājušā gada interviju ar Geriju Brotmenu. Jūs varat sākt ar 1. daļa no mūsu intervijas vai dodieties uz 2. daļa.

Visas šajā intervijā redzamās grafikas ir iegūtas no Gerija Brotmena prezentācijas Snapdragon Tech Summit laikā. Jūs varat apskatīt slaidus šeit.