Usporedna analiza Qualcomm Snapdragona 8 Gen 1: Očekivanja performansi od vodećih modela iz 2022.

Upravo prošli tjedan pojavio se novi Qualcomm Snapdragon 8 Gen 1 na tehnološkom summitu tvrtke na Havajima. Qualcommov najnoviji čipset sadrži čitav niz velikih poboljšanja na svim područjima, što ga čini jednim od najuzbudljivijih Qualcomm uređaja u dugo vremena. Iako je tvrtka oklijevala pružiti dublje tehničke detalje u nekim aspektima (uključujući zanemarivanje da spomenemo naziv verzije Adreno ili Kryo), još uvijek smo mogli pokrenuti niz popularnih mjerila na Referentni uređaj Snapdragon 8 Gen 1. Ove referentne vrijednosti pomažu u postavljanju temelja očekivanih performansi za nadolazeće vodeće modele u 2022., dajući nam još jednu stvar kojoj se možemo veseliti sljedeće godine.

Na referentnom uređaju Snapdragon 8 Gen 1 pokrenuli smo jedno holističko mjerilo (AnTuTu), mjerilo usmjereno na CPU (Geekbench), mjerilo usmjereno na GPU (GFXBench) i mjerila MLPerf. Svaki benchmark pokrenut je tri puta, a uzeli smo prosjek triju rezultata. Qualcomm je prema zadanim postavkama omogućio opciju "UI Perf Mode" koju smo mi onemogućili jer učinkovito pokušava prisiliti aplikacije za usporedbu koje se izvode na Prime jezgrama kako bi se u nekim slučajevima postigla malo bolja ocjena mjerila. Također je vrijedno napomenuti da ćemo, kada se dočepamo komercijalnog uređaja s Qualcomm Snapdragon 8 Gen 1, ponovno pokrenuti ova mjerila.

Ako ste zainteresirani za čitanje o svim specifikacijama i značajkama mobilnog telefona Qualcomm Snapdragon 8 Gen 1 platformi koju je tvrtka do sada učinila dostupnom, preporučujem da pročitate naše objašnjenje o Qualcomm Snapdragon 8 Gen 1. Za brzu referencu, sastavio sam grafikon koji uspoređuje ključne specifikacije Qualcomm Snapdragona 8 Gen 1 referentni uređaj u usporedbi s druga dva referentna uređaja korištena u ovoj usporedbi referentnih vrijednosti. Taj grafikon možete pronaći ispod ispred rezultata usporedbe.

Qualcomm nam je dao skup očekivanih referentnih rezultata na temelju njihovog vlastitog testiranja. Ovo smo koristili samo kao referencu, a tablica je dostupna na dnu ovog članka koja sadrži referentne rezultate koje je Qualcomm očekivao da će referentni uređaj postići.

O ovom članku: Qualcomm je sponzorirao mog kolegu, Rich Woods, kako bi prisustvovali Snapdragon Tech Summitu u Koni na Havajima. Tvrtka mu je platila let i hotel. Međutim, Qualcomm nije imao nikakav doprinos u vezi sa sadržajem ovog članka.

Qualcomm Snapdragon 8 Gen 1 Benchmark rezultati

Specifikacije testnog uređaja

Pregled mjerila. Kliknite za proširenje.

Pregled mjerila

• AnTuTu: Ovo je holističko mjerilo. AnTuTu testira performanse CPU-a, GPU-a i memorije, uključujući i apstraktne testove i, odnedavno, relativne simulacije korisničkog iskustva (na primjer, podtest koji uključuje listanje kroz a ListView). Konačna ocjena ponderirana je prema razmatranjima dizajnera.
• GeekBench: CPU-centrični test koji koristi nekoliko računalnih opterećenja uključujući enkripciju, kompresiju (teksta i slika), renderiranje, fizičke simulacije, računalni vid, praćenje zraka, prepoznavanje govora i zaključivanje konvolucijske neuronske mreže na slikama. Raščlamba rezultata daje specifične metrike. Konačna ocjena ponderirana je u skladu s razmatranjima dizajnera, stavljajući veliki naglasak na cjelobrojnu izvedbu (65%), zatim izvedbu s pomičnim brojem (30%) i na kraju kriptografiju (5%).
• GFXBench: Cilj je simulirati prikaz grafike videoigara korištenjem najnovijih API-ja. Mnogo efekata na zaslonu i visokokvalitetnih tekstura. Noviji testovi koriste Vulkan dok stari testovi koriste OpenGL ES 3.1. Izlazi su okviri tijekom testa i sličica u sekundi (drugi broj podijeljen s duljinom testa, u biti), umjesto ponderirane postići.
  • Astečke ruševine: Ovi testovi su računalno najzahtjevniji koje nudi GFXBench. Trenutačno vrhunski mobilni čipseti ne mogu izdržati 30 sličica u sekundi. Konkretno, test nudi geometriju stvarno velikog broja poligona, hardversku teselaciju, teksture visoke razlučivosti, globalno osvjetljenje i obilje mapiranja sjena, obilni efekti čestica, kao i cvjetanje i dubinska oštrina učinci. Većina ovih tehnika će naglasiti mogućnosti procesora za izračunavanje shadera.
  • Manhattan ES 3.0/3.1: Ovaj test ostaje relevantan s obzirom na to da su moderne igre već dostigle predloženu grafičku vjernost i implementiraju iste vrste tehnika. Sadrži složenu geometriju koja koristi višestruke ciljeve renderiranja, refleksije (kubične mape), mrežno renderiranje, mnoge odgođene izvore osvjetljenja, kao i cvjetanje i dubinsku oštrinu u prolazu nakon obrade.
• MLPerf Mobile: MLPerf Mobile je benchmark otvorenog koda za testiranje performansi mobilne umjetne inteligencije. Bilo je stvorio MLCommons, neprofitni, otvoreni inženjerski konzorcij, za „osiguranje transparentnosti i jednakih uvjeta za usporedbu ML sustava, softvera i rješenja.” Prva iteracija MLPerf Mobilea pruža mjerilo izvedbe zaključivanja za pregršt računalnog vida i prirodnog jezika zadaci obrade. Za više informacija pogledajte rad “MLPerf Mobile Inference Benchmark: Zašto je Mobile AI Benchmarking težak i što učiniti u vezi s tim.”
  • Klasifikacija slike: Ovaj test uključuje zaključivanje oznake koja se primjenjuje na ulaznu sliku. Uobičajeni slučajevi upotrebe uključuju pretraživanje fotografija ili izdvajanje teksta. Korišteni referentni model je MobileNetEdgeTPU s 4M parametara, skup podataka je ImageNet 2012 (224×224), a ciljna kvaliteta je 98% od FP32 (76,19% Top-1).
  • Segmentacija slike: Ovaj test uključuje dijeljenje ulazne slike na označene objekte. Tipični slučajevi upotrebe uključuju samostalnu vožnju ili daljinsko očitavanje. Korišteni referentni model je DeepLab v3+ s 2M parametara, skup podataka je ADE20K (512×512), a ciljna kvaliteta je 93% od FP32 (0,244 mAP).
  • Detekcija objekta: Ovaj test uključuje crtanje graničnih okvira oko objekata kao i davanje oznake za te objekte. Uobičajeni slučajevi upotrebe uključuju unos putem kamere, primjerice za otkrivanje opasnosti ili analizu prometa tijekom vožnje. Referentni model je SSD-MobileNet v2 sa 17M parametara, skup podataka je COCO 2017 (300×300), a ciljna kvaliteta je 97% od FP32 (54,8% mIoU).
  • Obrada jezika: Ovaj test uključuje kolokvijalno odgovaranje na pitanja. Tipični slučajevi upotrebe uključuju online tražilice. Referentni model je MobileBERT s 25M parametara, skup podataka je mini Squad (Stanford Question Answering Dataset) v1.1 dev, a ciljna kvaliteta je 93% od FP32 (93,98% F1).

Čitaj više

---

Rezultati mjerenja

AnTuTu

Počevši s AnTuTu, možemo vidjeti da je referentni uređaj Qualcomm Snapdragon 8 Gen 1 postigao bodove znatno više nego prethodnih godina, s velikim povećanjem iz godine u godinu od otprilike 240.000 bodova. Ovo je prilično veliko poboljšanje od otprilike 33%, znatno iznad Qualcommovih obećanja o poboljšanju brzine od 20%. Ovo je samo jedan test, ali AnTuTu je izvrstan alat za usporedbu sirove računalne sposobnosti između uređaja, čak i ako se sve to ne prevodi u korištenje u stvarnom svijetu.

Geekbench

U Geekbenchu ​​5.0, međutim, to je potpuno druga priča. Snapdragon 8 Gen 1 pokazuje mali ili nikakav napredak u odnosu na prethodni Snapdragon 888 referentni uređaj, a zapravo čak i nazaduje u performansama kada je u pitanju višejezgreni procesor. Nije ni da smo propali -- Qualcomm nam je dao informativnu stranicu s referentnim rezultatima koje možemo očekivati ​​od Snapdragona 8 Gen 1, a oni su u skladu s onim što bi se trebalo očekivati. Zapravo, performanse jedne jezgre bile su veće od gornjih granica koje nam je dao Qualcomm, dok su performanse više jezgri bile 20 bodova ispod donjih granica onoga što možemo očekivati.

Rekavši to, mislim da je jasno da kakav god test bio, to nije testiranje u kojem je Qualcomm napravio poboljšanja. Naši drugi testovi pokazuju velika poboljšanja u odnosu na skupove čipova iz prethodnih godina.

GFXBench

Qualcomm nije otkrio mnogo o novom Adreno GPU-u u Snapdragon 8 Gen 1, tako da nemamo mnogo toga za reći o GPU-u osim njegovih poboljšanja u performansama. Ne znamo broj jezgri, ne znamo frekvenciju, a čak nemamo ni broj verzije. U testu GFXBench na Manhattanu, koji koristi OpenGL ES 3.0 API i renderira 1080p scenu izvan zaslona, ​​Snapdragon 8 Gen 1 imao je prosječni broj sličica u sekundi od 221 fps, oko 31% i 75% više od broja sličica u sekundi koji postižu Snapdragon 888 i 865 odnosno. U GFXBench-ovom testu Aztec Ruins, koji koristi Vulkan graphics API i renderira 1080p scenu izvan zaslona, ​​Snapdragon 8 Gen 1 imao je prosječni framerate od 41 fps. Ipak postoji upozorenje za ovo; prethodni rezultati na referentnim uređajima testirani su u 1080p, dok je jedini test Aztec Ruins kojem smo imali pristup bio u 1440p. Povećanje na 1080p zahtijeva 43,75% više piksela za prikaz u jednom trenutku, zbog čega je izvedba smanjena u ovom testu.

Samo neki od vrlo najbolje Android igre zahtijevaju mnogo GPU konjskih snaga, ali poboljšane performanse GPU-a korisne su za više od samog igranja. Rekavši to, igranje je definitivno najveći razlog zašto će ljudima biti stalo do ovih benchmark rezultata, i Čini se da Snapdragon 8 Gen 1 donosi rezultate sa svojim 35% bržim grafičkim renderiranjem i 20% boljom energetskom učinkovitošću godinu dana kasnije godina. Međutim, ovi rezultati pokazuju samo vrhunske performanse GPU-a, pa ćemo morati ponovno posjetiti GFXBench — nakon što se dočepamo komercijalnog hardvera — kako bismo pokrenuli dugoročne performanse benchmarka testovi.

MLPerf

Qualcomm je bio posebno oprezan oko pojedinosti kada su u pitanju poboljšanja umjetne inteligencije. Nemamo nikakve brojke za TOPS (trilijun operacija u sekundi), iako imamo neke informacije o drugim poboljšanjima. Tu je, na primjer, treća generacija osjetnog središta tvrtke, a također je demonstrirao niz drugih značajki specifičnih za SoC na Havajima.

Međutim, teško nam je pokazati koliko je zapravo značajan ovaj skok u izvedbi. Detaljno smo razgovarali o poteškoćama benchmarkinga umjetne inteligencije tijekom naših intervjua s Qualcommov Travis Lanier, Gary Brotman i Ziad Asghar. Dobra vijest je da je, nakon naših razgovora s Qualcommovim izvršnim direktorima, došlo do značajnog napretka u području AI benchmarkova.

Trenutno dostupna mjerila koja najviše obećavaju dolaze u obliku MLPerf Mobile, koji je benchmark za mobilnu umjetnu inteligenciju otvorenog koda koji podržava više dobavljača SoC-a, pružatelja ML okvira i modela proizvođači. Njegova početna serija rezultata mobilnog zaključivanja je javno, pa smo te rezultate upotrijebili za usporedbu Snapdragona 8 Gen 1 sa Snapdragonom 888 u Xiaomi Mix 4, Dimensity 1100 u Vivo S9 5G i Exynos 2100 u Samsung Galaxy S21 Plus. Nismo dobili rezultate kašnjenja — samo podatke o propusnosti — tako da nismo iscrtali potpune rezultate onako kako su ih dobavljači poslali na provjeru MLCommonsu.

U ovim odabranim referentnim vrijednostima za zaključivanje računalnog vida i obrade prirodnog jezika možemo vidjeti da je referentni uređaj Qualcomm Snapdragon 8 Gen 1 postigao najviše ocjene u sva četiri testa do daleko. Demensity 1100 je sveukupno prošao prilično loše. Qualcommov Snapdragon 888 još uvijek je udobno pobijedio ostale u ovom testu, ali Snapdragon 8 Gen 1 je na drugoj razini u svim ovim testovima.

Bit će zanimljivo vidjeti koje aplikacije i značajke razvojni programeri i OEM-ovi mogu stvoriti koristeći AI snagu Snapdragona 8 Gen 1. Računalni vid igrat će posebno važnu ulogu u mnogim videografskim značajkama poboljšanim umjetnom inteligencijom koje ćemo izraditi vjerojatno ćemo vidjeti 2022., dok poboljšana izvedba NLP-a također može utjecati na susjedne aspekte videa poput zvuka snimanje. Tvrtke poput Googlea rade na Google Tensor također će pogurati druge dobavljače SoC-a u ovom odjelu.

Zaključak

Tablica koju nam je Qualcomm dostavio s očekivanim referentnim rezultatima je ispod, a možete vidjeti da je uglavnom u skladu s rezultatima koje smo postigli iznad.

Očekivani referentni rezultati za referentni dizajn Snapdragon 8 Gen 1 (od Qualcomma)

Benchmark	Verzija	metoda	Očekivani raspon rezultata
Sustav	Geekbench ST	v5.4.2	Prosjek 3 ponavljanja	~1220 - 1233
Sustav	Geekbench MT	v5.4.2	Prosjek 3 ponavljanja	~3770 - 3810
Sustav	AnTuTu	v9.2.1	Prosjek 3 ponavljanja	1. izvođenje: ~1m Prosj. od 3 ponavljanja: ~980K
Sustav	PCMark	v3.0.4061	Prosjek 3 ponavljanja	~17k
Preglednik (Chrome v95.0.4638.74 64-bitni)	JetStream	v2.0	Prosjek 3 ponavljanja	~135 - 140
preglednik	Brzinomjer	v2.0	Prosjek 3 ponavljanja	~123 - 126
preglednik	WebXPRT	v3.0	Prosjek 3 ponavljanja	~194 - 197
AI	AITuTu	v2.0	Prosjek 3 ponavljanja	~2,550,000 - 2,600,000
AI	AIMark	v3.0	Prosjek 3 ponavljanja	~97K
AI	MLPerf (na zasebnom QRD-u budući da je potrebno 30 minuta za pokretanje)	v1.1	Prosjek 3 ponavljanja	Klasa slike: ~2435 - 2450 Detekcija objekta: ~1180 - 1250 Segment slike: ~520 - 540 Razumijevanje jezika: ~38 - 40 Klasa slike (izvan mreže): ~3580 - 3650
AI	ETH AIB	v4.0.4	Prosjek 3 ponavljanja	~530 - 550 tisuća
Grafika	GFXBench Manhattan 3.0 izvan zaslona (1080p) (FPS)	v5.0	Prosjek 3 ponavljanja	~267 - 268 FPS
Grafika	GFXBench T-Rex - izvan zaslona (1080p) (FPS)	v5.0	Prosjek 3 ponavljanja	~450 - 452 FPS
Grafika	GFXBench Manhattan 3.1 izvan zaslona (1080p) (FPS)	v5.0	Prosjek 3 ponavljanja	~176 FPS
Grafika	GFXBench Car Chase izvan zaslona (1080p) ES3.1 (FPS)	v5.0	Prosjek 3 ponavljanja	~97 - 98 FPS
Grafika	GFXBench Aztec Ruins Vulkan (High Tier) Offscreen (1440p) (FPS)	v5.0	Prosjek 3 ponavljanja	~49 FPS
Grafika	GFXBench Aztec Ruins OpenGL (High Tier) Offscreen (1440p) (FPS)	v5.0	Prosjek 3 ponavljanja	~43 FPS

Čitaj više

Snapdragon 8 Gen 1 donosi gomilu poboljšanja u odnosu na prošlogodišnji čipset, posebno kada je u pitanju AI. Iako definitivno postoji neka čudnost u rezultatima vezanim za CPU iz Geekbencha, jasno je da postoje opća poboljšanja. Ako nadograđujete s uređaja koji je dvije godine stariji (ili stariji), poboljšanja će vjerojatno biti vidljiva, iako će veliki dobici u performansama umjetne inteligencije većina vjerojatno proći nezamijećeno. Tvrtke rijetko iskorištavaju puni potencijal umjetne inteligencije kada su u pitanju Qualcommovi čipseti, a vjerojatno će i ovdje biti isto.

Također je vrijedno napomenuti da s jačanjem konkurencije možda vrijedi pričekati da vidimo što će Samsung i MediaTek sljedeće učiniti. The Dimenzija 9000 chipset ima potencijal za glavnu pobjedu nad Snapdragonom 8 Gen 1 kada su u pitanju performanse, a još uvijek ne znamo puno o nadolazećem Exynosu 2200. Osobno se veselim ponovnom pregledu ovih mjerila na komercijalnom uređaju u budućnosti, osobito u kontroliranijem okruženju.