Porovnávanie Qualcomm Snapdragon 8 Gen 1: Očakávania výkonu od vlajkových lodí na rok 2022

Len minulý týždeň nastal príchod novinky Qualcomm Snapdragon 8 Gen 1 na technologickom summite spoločnosti na Havaji. Najnovšia čipová súprava Qualcomm obsahuje celý rad zásadných vylepšení, vďaka ktorým je toto jedno z najzaujímavejších zariadení Qualcomm za dlhú dobu. Zatiaľ čo spoločnosť váhala poskytnúť podrobné technické podrobnosti v niektorých aspektoch (vrátane zanedbania spomenúť názov verzie Adreno alebo Kryo), stále sme boli schopní spustiť celý rad populárnych benchmarkov na Referenčné zariadenie Snapdragon 8 Gen 1. Tieto referenčné hodnoty pomáhajú nastaviť základnú líniu výkonnostných očakávaní pre nadchádzajúce vlajkové lode v roku 2022, čo nám dáva ďalšiu vec, na ktorú sa môžeme tešiť budúci rok.

Na referenčnom zariadení Snapdragon 8 Gen 1 sme spustili jeden holistický benchmark (AnTuTu), benchmark zameraný na CPU (Geekbench), benchmark zameraný na GPU (GFXBench) a benchmarky MLPerf. Každý benchmark bol spustený trikrát a zobrali sme priemer troch výsledkov. Qualcomm v predvolenom nastavení povolil možnosť „UI Perf Mode“, ktorú sme zakázali, pretože sa účinne snaží vynútiť benchmarkingové aplikácie, ktoré majú bežať na jadrách Prime, aby bolo možné dosiahnuť o niečo vyššie skóre referenčné hodnoty. Za zmienku tiež stojí, že keď sa nám dostane do rúk komerčné zariadenie s Qualcomm Snapdragon 8 Gen 1, tieto benchmarky zopakujeme.

Ak máte záujem prečítať si všetky špecifikácie a funkcie mobilného telefónu Qualcomm Snapdragon 8 Gen 1 platforme, ktorú spoločnosť doteraz sprístupnila, potom odporúčam prečítať si náš vysvetľovač na Qualcomm Snapdragon 8 Gen 1. Pre rýchlu orientáciu som zostavil tabuľku porovnávajúcu kľúčové špecifikácie Qualcomm Snapdragon 8 referenčné zariadenie Gen 1 v porovnaní s ďalšími dvoma referenčnými zariadeniami použitými v tomto porovnávacom porovnaní. Tento graf nájdete nižšie pred výsledkami benchmarku.

Qualcomm nám poskytol súbor očakávaných výsledkov benchmarkov na základe vlastného testovania. Použili sme to len ako referenciu a v spodnej časti tohto článku je k dispozícii tabuľka obsahujúca referenčné skóre, ktoré spoločnosť Qualcomm očakávala od referenčného zariadenia.

O tomto článku: Qualcomm sponzoroval môjho kolegu, Rich Woods, zúčastniť sa Snapdragon Tech Summit v Kona na Havaji. Spoločnosť mu zaplatila let a hotel. Spoločnosť Qualcomm však nemala žiadne pripomienky týkajúce sa obsahu tohto článku.

Výsledky benchmarku Qualcomm Snapdragon 8 Gen 1

Špecifikácie testovacieho zariadenia

Prehľad benchmarkov. Kliknutím rozbalíte.

Prehľad benchmarkov

• AnTuTu: Toto je holistický štandard. AnTuTu testuje výkon CPU, GPU a pamäte, pričom zahŕňa abstraktné testy a najnovšie aj relevantné simulácie používateľskej skúsenosti (napríklad čiastkový test, ktorý zahŕňa rolovanie cez a ListView). Konečné skóre je vážené podľa úvah dizajnéra.
• GeekBench: Test zameraný na CPU, ktorý využíva niekoľko výpočtových zaťažení vrátane šifrovania, kompresie (text a obrázky), vykresľovanie, fyzikálne simulácie, počítačové videnie, sledovanie lúčov, rozpoznávanie reči a odvodenie konvolučných neurónových sietí na obrázkoch. Rozdelenie skóre poskytuje konkrétne metriky. Konečné skóre je vážené podľa úvah dizajnéra, pričom sa kladie veľký dôraz na celočíselný výkon (65 %), potom na výkon s pohyblivým číslom (30 %) a nakoniec na kryptografiu (5 %).
• GFXBench: Cieľom je simulovať vykresľovanie grafiky videohier pomocou najnovších rozhraní API. Veľa efektov na obrazovke a vysokokvalitných textúr. Novšie testy používajú Vulkan, zatiaľ čo staršie testy používajú OpenGL ES 3.1. Výstupom sú snímky počas testu a snímok za sekundu (druhé číslo vydelené v podstate dĺžkou testu), namiesto váženého skóre.
  • Aztécke ruiny: Tieto testy sú výpočtovo najťažšie, ktoré ponúka GFXBench. V súčasnosti špičkové mobilné čipsety nedokážu vydržať 30 snímok za sekundu. Konkrétne test ponúka skutočne vysoký počet polygónov geometriu, hardvérovú teseláciu, textúry s vysokým rozlíšením, globálne osvetlenie a množstvo tieňového mapovania, bohaté časticové efekty, ako aj rozkvet a hĺbku ostrosti účinky. Väčšina týchto techník zdôrazní výpočtové schopnosti shadera procesora.
  • Manhattan ES 3.0/3.1: Tento test zostáva relevantný vzhľadom na to, že moderné hry už dosiahli navrhovanú grafickú vernosť a implementujú rovnaké druhy techník. Vyznačuje sa komplexnou geometriou využívajúcou viaceré vykresľovacie ciele, odrazy (kubické mapy), sieťové vykresľovanie, mnoho odložených svetelných zdrojov, ako aj rozkvet a hĺbku ostrosti v prechode po spracovaní.
• MLPerf Mobile: MLPerf Mobile je open-source benchmark na testovanie výkonu mobilnej AI. To bolo vytvoril MLCommons, neziskové, otvorené inžinierske konzorcium, s cieľom „poskytnúť transparentnosť a rovnaké podmienky na porovnávanie systémov ML, softvéru a riešenia.” Prvá iterácia MLPerf Mobile poskytuje test výkonu odvodenia pre hŕstku počítačového videnia a prirodzeného jazyka spracovateľských úloh. Viac informácií nájdete v papieri „Benchmark mobilnej inferencie MLPerf: Prečo je porovnávanie mobilnej AI ťažké a čo s tým robiť.”
  • Klasifikácia obrázkov: Tento test zahŕňa odvodenie štítka, ktorý sa má použiť na vstupný obrázok. Medzi typické prípady použitia patrí vyhľadávanie fotografií alebo extrakcia textu. Použitý referenčný model je MobileNetEdgeTPU s parametrami 4M, súbor údajov je ImageNet 2012 (224×224) a cieľovou kvalitou je 98 % FP32 (76,19 % Top-1).
  • Segmentácia obrázka: Tento test zahŕňa rozdelenie vstupného obrazu na označené objekty. Medzi typické prípady použitia patrí samojazdenie alebo diaľkové snímanie. Použitý referenčný model je DeepLab v3+ s parametrami 2M, súbor údajov je ADE20K (512×512) a cieľová kvalita je 93 % FP32 (0,244 mAP).
  • Detekcia objektu: Tento test zahŕňa kreslenie ohraničujúcich rámčekov okolo objektov, ako aj poskytovanie štítkov pre tieto objekty. Typické prípady použitia zahŕňajú vstup z kamery, ako je detekcia nebezpečenstva alebo analýza premávky počas jazdy. Referenčným modelom je SSD-MobileNet v2 s parametrami 17M, súbor údajov je COCO 2017 (300×300) a kvalitatívnym cieľom je 97 % FP32 (54,8 % mIoU).
  • Jazykové spracovanie: Tento test zahŕňa hovorové odpovedanie na otázky. Medzi typické prípady použitia patria online vyhľadávače. Referenčný model je MobileBERT s parametrami 25M, súbor údajov je mini Squad (Stanford Question Answering Dataset) v1.1 dev a cieľová kvalita je 93 % FP32 (93,98 % F1).

čítaj viac

---

Výsledky porovnávania

AnTuTu

Keď začneme s AnTuTu, môžeme vidieť, že referenčné zariadenie Qualcomm Snapdragon 8 Gen 1 zaznamenalo skóre podstatne vyššia ako v predchádzajúcich rokoch, s výrazným medziročným nárastom o zhruba 240 000 bodov. Toto je dosť veľké zlepšenie o približne 33%, čo je výrazne nad sľubmi Qualcommu o 20% zlepšení rýchlosti. Toto je len jeden test, ale AnTuTu je skvelý nástroj na porovnávanie surových výpočtových schopností medzi zariadeniami, aj keď nie všetko sa premieta do používania v reálnom svete.

Geekbench

V Geekbench 5.0 je to však úplne iný príbeh. Snapdragon 8 Gen 1 demonštruje malý až žiadny zisk oproti referenčnému zariadeniu Snapdragon 888 z minulého roku a v skutočnosti dokonca klesá vo výkone, pokiaľ ide o viac jadier. Nie je to ani tak, že by sme mali blbca – Qualcomm nám dal informačnú stránku so skóre benchmarkov, ktoré môžeme očakávať od Snapdragon 8 Gen 1, a tie sú v súlade s tým, čo by sa malo očakávať. V skutočnosti bol výkon jedného jadra vyšší ako horná hranica, ktorú nám poskytol Qualcomm, zatiaľ čo výkon viacerých jadier bol 20 bodov pod dolnou hranicou toho, čo môžeme očakávať.

Napriek tomu si myslím, že je jasné, že nech je test akýkoľvek, netestuje sa tam, kde Qualcomm urobil vylepšenia. Naše ďalšie testy ukazujú výrazné zlepšenia oproti čipsetom z predchádzajúcich rokov.

GFXBench

Qualcomm nezverejnil veľa o novom GPU Adreno v Snapdragon 8 Gen 1, takže o GPU máme len málo čo povedať okrem jeho zvýšenia výkonu. Nepoznáme počet jadier, nepoznáme frekvenciu a nemáme ani číslo verzie. V teste GFXBench na Manhattane, ktorý používa OpenGL ES 3.0 API a vykresľuje scénu 1080p mimo obrazovky, mal Snapdragon 8 Gen 1 priemerná snímková frekvencia 221 snímok za sekundu, približne o 31 % a 75 % vyššia ako snímková frekvencia dosahovaná modelmi Snapdragon 888 a 865 resp. V teste GFXBench Aztec Ruins, ktorý používa grafické rozhranie Vulkan a vykresľuje scénu 1080p mimo obrazovky, mal Snapdragon 8 Gen 1 priemernú snímkovú frekvenciu 41 snímok za sekundu. Je tu však upozornenie; predchádzajúce výsledky na referenčných zariadeniach boli testované v rozlíšení 1080p, zatiaľ čo jediný test Aztec Ruins, ku ktorému sme mali prístup, bol v rozlíšení 1440p. Zvýšenie na 1080p vyžaduje, aby sa naraz vykreslilo o 43,75 % viac pixelov, a preto sa v tomto teste znížil výkon.

Len niektoré z veľmi najlepšie hry pre Android vyžadujú veľa výkonu GPU, ale vylepšený výkon GPU je užitočný na viac než len hranie. Napriek tomu je hranie hier určite tým najväčším dôvodom, prečo sa ľudia budú zaujímať o tieto výsledky benchmarkov Zdá sa, že Snapdragon 8 Gen 1 prináša o 35 % rýchlejšie vykresľovanie grafiky a o 20 % lepšiu energetickú účinnosť medziročne rok. Tieto výsledky však ukazujú iba špičkový výkon GPU, takže budeme musieť znova navštíviť GFXBench – akonáhle sa nám dostane do rúk komerčný hardvér – aby sme dosiahli dlhodobý výkon benchmarku testy.

MLPerf

Qualcomm bol obzvlášť ostražitý na špecifiká, pokiaľ ide o vylepšenia umelej inteligencie. Nemáme žiadne čísla pre TOPS (bilión operácií za sekundu), aj keď máme nejaké informácie o ďalších vylepšeniach. Existuje napríklad tretia generácia snímacieho centra spoločnosti a na Havaji tiež demonštrovala množstvo ďalších funkcií špecifických pre SoC.

Je však pre nás ťažké preukázať, aký významný je tento skok vo výkonnosti v skutočnosti. Počas našich rozhovorov sme podrobne hovorili o ťažkostiach porovnávania AI Travis Lanier od Qualcommu, Gary Brotman a Ziad Asghar. Dobrou správou je, že od našich diskusií s manažérmi Qualcommu došlo k výraznému pokroku v oblasti benchmarkov AI.

Najsľubnejšie benchmarky, ktoré sú v súčasnosti k dispozícii, prichádzajú vo forme MLPerf Mobile, čo je an benchmark mobilnej umelej inteligencie s otvoreným zdrojom podporovaný viacerými dodávateľmi SoC, poskytovateľmi rámca ML a modelom výrobcov. Jeho počiatočná dávka výsledkov mobilného odvodzovania je verejný, takže sme tieto výsledky použili na porovnanie Snapdragon 8 Gen 1 so Snapdragonom 888 v Xiaomi Mix 4, Dimensity 1100 vo Vivo S9 5G a Exynos 2100 v Samsung Galaxy S21 Plus. Nedostali sme výsledky latencie – iba údaje o priepustnosti – takže sme nevykreslili úplné výsledky tak, ako ich dodávatelia predložili na overenie MLCommons.

V týchto vybraných referenčných hodnotách počítačového videnia a spracovania prirodzeného jazyka môžeme vidieť že referenčné zariadenie Qualcomm Snapdragon 8 Gen 1 dosiahlo najvyššie skóre vo všetkých štyroch testoch o ďaleko. Demensity 1100 sa celkovo darilo dosť zle. Snapdragon 888 od Qualcommu v tomto teste stále pohodlne porazil ostatných, ale Snapdragon 8 Gen 1 je vo všetkých týchto testoch na inej úrovni.

Bude zaujímavé sledovať, aké aplikácie a funkcie dokážu vývojári a OEM vytvoriť pomocou umelej inteligencie Snapdragon 8 Gen 1. Počítačové videnie bude hrať obzvlášť dôležitú úlohu v mnohých funkciách videografie vylepšených AI pravdepodobne uvidíme v roku 2022, zatiaľ čo zlepšený výkon NLP môže tiež ovplyvniť aspekty súvisiace s videom, ako je zvuk nahrávanie. Spoločnosti ako Google pracujú na Google Tensor bude tlačiť aj na iných predajcov SoC v tomto oddelení.

Záver

Tabuľka, ktorú nám spoločnosť Qualcomm poskytla s očakávaným skóre benchmarkov, je uvedená nižšie, pričom môžete vidieť, že poklesla väčšinou v súlade s výsledkami, ktoré sme dosiahli vyššie.

Očakávané benchmarkové skóre pre referenčný dizajn Snapdragon 8 Gen 1 (od Qualcommu)

Benchmark	Verzia	Metóda	Očakávaný rozsah skóre
Systém	Geekbench ST	v5.4.2	Priemer 3 iterácií	~1220 - 1233
Systém	Geekbench MT	v5.4.2	Priemer 3 iterácií	~3770 - 3810
Systém	AnTuTu	v9.2.1	Priemer 3 iterácií	1. spustenie: ~1mAvg z 3 iterácií:~980K
Systém	PCMark	v3.0.4061	Priemer 3 iterácií	~17 tis
Prehliadač (Chrome v95.0.4638.74 64-bitový)	Prúdový pohon	v2.0	Priemer 3 iterácií	~135 - 140
Prehliadač	Rýchlomer	v2.0	Priemer 3 iterácií	~123 - 126
Prehliadač	WebXPRT	v3.0	Priemer 3 iterácií	~194 - 197
AI	AITuTu	v2.0	Priemer 3 iterácií	~2,550,000 - 2,600,000
AI	AIMark	v3.0	Priemer 3 iterácií	~97 tis
AI	MLPerf (na samostatnom QRD, pretože jeho spustenie trvá 30 minút)	v1.1	Priemer 3 iterácií	Trieda obrázka: ~2435 – 2450 Detekcia objektu: ~1180 - 1250 Segment obrázka: ~520 – 540 Jazykové porozumenie: ~38 - 40 Trieda obrázka (offline): ~3580 – 3650
AI	ETH AIB	v4.0.4	Priemer 3 iterácií	~530 - 550 tis
Grafika	GFXBench Manhattan 3.0 Offscreen (1080p) (FPS)	v5.0	Priemer 3 iterácií	~267 - 268 FPS
Grafika	GFXBench T-Rex – Offscreen (1080p) (FPS)	v5.0	Priemer 3 iterácií	~450 - 452 FPS
Grafika	GFXBench Manhattan 3.1 Offscreen (1080p) (FPS)	v5.0	Priemer 3 iterácií	~176 FPS
Grafika	GFXBench Car Chase Offscreen (1080p) ES3.1 (FPS)	v5.0	Priemer 3 iterácií	~97 - 98 FPS
Grafika	GFXBench Aztec Ruins Vulkan (vysoká úroveň) mimo obrazovky (1440p) (FPS)	v5.0	Priemer 3 iterácií	~49 FPS
Grafika	GFXBench Aztec Ruins OpenGL (High Tier) Offscreen (1440p) (FPS)	v5.0	Priemer 3 iterácií	~43 FPS

čítaj viac

Snapdragon 8 Gen 1 prináša množstvo vylepšení oproti minuloročnému čipsetu, najmä pokiaľ ide o AI. Aj keď sú výsledky Geekbench viazané na CPU určite nejaké divné, je jasné, že existujú všeobecné vylepšenia. Ak inovujete zo zariadenia, ktoré je o dva roky staršie (alebo staršie), vylepšenia budú pravdepodobne viditeľné, aj keď obrovské zvýšenie výkonu AI si väčšina pravdepodobne nevšimne. Spoločnosti zriedkakedy využívajú plný potenciál AI, pokiaľ ide o čipsety Qualcomm, a je pravdepodobné, že to bude opäť rovnaké.

Za zmienku tiež stojí, že s rastúcou konkurenciou by sa možno oplatilo počkať na to, čo Samsung a MediaTek urobia ďalej. The Rozmer 9000 čipset má potenciál postaviť Snapdragon 8 Gen 1 čelom, pokiaľ ide o výkon, a o pripravovanom Exynos 2200 toho zatiaľ veľa nevieme. Osobne sa teším na prehodnotenie týchto benchmarkov na komerčnom zariadení v budúcnosti, najmä v kontrolovanejšom prostredí.