Benchmarking van de Snapdragon 8 Gen 2: verwachtingen scheppen voor vlaggenschip-smartphones in 2023

Vorige week zag de aankondiging van de Qualcomm Leeuwenbek 8 Gen 2 op de technische top van het bedrijf in Hawaï. De nieuwste chipsetpakketten van Qualcomm bevatten verbeterde specificaties en het TSMC-productieproces, dat, als de 8 Plus Gen 1 iets te bieden heeft, enige efficiëntiewinst zou moeten opleveren. Bovendien aarzelde het bedrijf om in sommige aspecten diepgaande technische details te verstrekken (waaronder het nalaten om noem een ​​Adreno- of Kryo-versienaam), we zouden nog steeds een scala aan populaire benchmarks kunnen uitvoeren op de Snapdragon 8 Gen 2-referentie apparaat. Deze benchmarks helpen bij het bepalen van de basislijn van prestatieverwachtingen voor aankomende vlaggenschepen in 2023, wat ons iets geeft om naar uit te kijken.

Over dit artikel: Qualcomm sponsorde mijn collega, Rijke bossen, om de Snapdragon Tech Summit in Maui, Hawaï bij te wonen. Het bedrijf betaalde zijn vlucht en hotel. Qualcomm had echter geen input met betrekking tot de inhoud van dit artikel.

Hoe we de Snapdragon 8 Gen 2 hebben gebenchmarkt

Op het Snapdragon 8 Gen 2-referentieapparaat van Qualcomm hebben we één holistische benchmark (AnTuTu), een CPU-centrische benchmark (Geekbench), een GPU-centrische benchmark (GFXBench) en MLPerf-benchmarks uitgevoerd. Elke benchmark is drie keer uitgevoerd en we hebben het gemiddelde van de drie resultaten genomen. Qualcomm had standaard een "UI Perf Mode" -optie ingeschakeld die we ingeschakeld lieten. Het probeert effectief de benchmarking-apps te dwingen om op Prime-kernen te draaien om een ​​iets hogere score in bepaalde benchmarks te halen, dus houd hier rekening mee bij het bekijken van deze resultaten. Het is ook vermeldenswaard dat zodra we een commercieel apparaat met de Qualcomm Snapdragon 8 Gen 2 in handen hebben, we deze benchmarks opnieuw zullen uitvoeren.

Qualcomm heeft ons een reeks verwachte benchmarkscores verstrekt op basis van eigen tests. We hebben dit alleen ter referentie gebruikt en onderaan dit artikel is een tabel beschikbaar met de benchmarkscores die Qualcomm verwachtte dat het referentieapparaat zou behalen.

Snapdragon 8 Gen 2 benchmarks overzicht

• AnTuTu: Dit is een holistische benchmark. AnTuTu test de CPU-, GPU- en geheugenprestaties, inclusief zowel abstracte tests als, sinds kort, herkenbare simulaties van gebruikerservaringen (bijvoorbeeld de subtest waarbij je door een Lijstweergave). De uiteindelijke score wordt gewogen naar de overwegingen van de ontwerper.
• GeekBench: Dit is een CPU-gerichte test die verschillende rekentaken gebruikt, waaronder codering, compressie (tekst en afbeeldingen), rendering, natuurkundige simulaties, computervisie, ray tracing, spraakherkenning en convolutionele neurale netwerkinferentie afbeeldingen. De uitsplitsing van de score geeft specifieke statistieken. De uiteindelijke score wordt gewogen op basis van de overwegingen van de ontwerper, waarbij een grote nadruk wordt gelegd op integer-prestaties (65%), vervolgens float-prestaties (30%) en tot slot cryptografie (5%).
• GFXBench: Streeft naar het simuleren van grafische weergave van videogames met behulp van de nieuwste API's, die veel effecten op het scherm en hoogwaardige texturen bevatten. Nieuwere tests gebruiken Vulkan, terwijl oudere tests OpenGL ES 3.1 gebruiken. De outputs zijn frames tijdens de test en frames per seconde (in wezen het andere getal gedeeld door de testlengte) in plaats van een gewogen score.
  • Azteekse ruïnes: Deze tests zijn de meest computationeel zware die door GFXBench worden aangeboden. Momenteel kunnen de beste mobiele chipsets geen 30 FPS aan. De test biedt met name geometrie met een zeer hoog aantal polygonen, hardware-mozaïekpatroon, texturen met hoge resolutie, globale verlichting en veel schaduwafbeeldingen, overvloedige deeltjeseffecten, evenals bloei en scherptediepte Effecten. De meeste van deze technieken zullen de computercapaciteiten van de processor benadrukken.
  • Manhattan ES 3.0/3.1: Deze test blijft relevant gezien het feit dat moderne games de voorgestelde grafische getrouwheid al hebben bereikt en dezelfde soorten technieken implementeren. Het beschikt over complexe geometrie die gebruik maakt van meerdere renderdoelen, reflecties (kubieke kaarten), mesh-weergave, veel uitgestelde lichtbronnen, evenals bloei en scherptediepte in een nabewerkingspassage.
• MLPerf mobiel: MLPerf Mobile is een open-source benchmark voor het testen van mobiele AI-prestaties. Het was gemaakt door MLCommons, een open engineeringconsortium zonder winstoogmerk, om “transparantie en een gelijk speelveld te bieden voor het vergelijken van ML-systemen, software en oplossingen." De eerste iteratie van MLPerf Mobile biedt een benchmark voor inferentieprestaties voor een handvol computervisie en natuurlijke taal verwerkingstaken. Voor meer informatie, zie dit papier getiteld "MLPerf Mobile Inference Benchmark: waarom mobiele AI-benchmarking moeilijk is en wat je eraan kunt doen."
  • Beeldclassificatie: Deze test omvat het afleiden van een label dat op een invoerbeeld moet worden toegepast. Typische use-cases zijn onder meer zoeken naar foto's of tekstextractie. Het gebruikte referentiemodel is MobileNetEdgeTPU met 4M-parameters, de dataset is ImageNet 2012 (224×224) en het kwaliteitsdoel is 98% van FP32 (76,19% Top-1).
  • Beeldsegmentatie: Deze test omvat het partitioneren van een invoerbeeld in gelabelde objecten. Typische use-cases zijn onder meer zelfrijdende auto's of teledetectie. Het gebruikte referentiemodel is DeepLab v3+ met 2M parameters, de dataset is ADE20K (512×512) en het kwaliteitsdoel is 93% van FP32 (0,244 mAP).
  • Objectdetectie: Deze test omvat het tekenen van begrenzingskaders rond objecten en het voorzien van een label voor die objecten. Typische use-cases hebben betrekking op camera-invoer, zoals voor gevarendetectie of verkeersanalyse tijdens het rijden. Het referentiemodel is SSD-MobileNet v2 met 17 miljoen parameters, de dataset is COCO 2017 (300×300) en het kwaliteitsdoel is 97% van FP32 (54,8% mIoU).
  • Taalverwerking: Deze test omvat het beantwoorden van vragen in de volksmond. Typische use-cases zijn onder meer online zoekmachines. Het referentiemodel is MobileBERT met 25 miljoen parameters, de dataset is mini Squad (Stanford Question Answering Dataset) v1.1 dev, en het kwaliteitsdoel is 93% van FP32 (93,98% F1).

Benchmark resultaten

Antutu

Net als in voorgaande jaren zien we een verbetering van ongeveer 10% in de AnTuTu-score met de Snapdragon 8 Gen 2 van dit jaar. Dit is een substantiële verbetering die vanaf het begin al suggereert dat de Snapdragon 8 Gen 2 een krachtigere chipset is dan elke andere Qualcomm-chip tot nu toe. Het komt niet helemaal overeen met de 35% snellere CPU-prestaties, maar aangezien AnTuTu een holistische benchmark is, betekent dat niet noodzakelijkerwijs dat het alle CPU-winsten volledig weerspiegelt.

Geekbank 5

Geekbench, echter is een CPU-centrische maatstaf voor prestaties. We zien bijna 30% winst in multi-core prestaties, wat op schema lijkt te liggen voor de 35% verbetering die Qualcomm adverteert. Benchmarks weerspiegelen niet altijd deze winst die Qualcomm meet, maar dat komt door het verschil in meten. Elke tool gebruikt een andere manier om scores te berekenen en chipsets te testen, en de manier van Geekbench legt niet noodzakelijkerwijs de verbeteringen bloot die Qualcomm heeft gemaakt. Een verbetering van 30% die wordt weerspiegeld in een verbetering op jaarbasis is nog steeds indrukwekkend.

GFXBench

Qualcomm heeft niet veel bekendgemaakt over de Adreno GPU in de Snapdragon 8 Gen 2, dus we hebben weinig te zeggen over de GPU, behalve de prestatieverbeteringen. We kennen het aantal cores niet, we kennen de frequentie niet en we hebben niet eens een versienummer. Dit is een verandering die tot stand kwam met de Snapdragon 8 Gen 1, en het is frustrerend bij het vergelijken van GPU's. Het is veel gemakkelijker om verschillen in de context van versienummers uit te leggen in plaats van de specifieke chip een naam te geven tijd.

Desalniettemin laten de resultaten een algehele verbetering van de grafische prestaties zien, vreemd genoeg afgezien van de T-Rex-test van GFXBench. Deze test is een test met lage intensiteit, dus ik zou er niet veel waarde aan hechten, afgezien van het feit dat het een lagere framesnelheid heeft. Het zou best kunnen dat het gewoon een optimalisatie is, en de andere, intensievere tests hebben veel betere resultaten. In de Manhattan-test van GFXBench, die de OpenGL ES 3.1 API gebruikt en een 1080p-scène offscreen weergeeft, had de Snapdragon 8 Gen 1 een gemiddelde framerate van 179 FPS. De Snapdragon 8 Gen 2 haalde daarentegen 222 FPS.

In de Aztec Ruins-test van GFXBench, die de Vulkan grafische API gebruikt en een 1080p-scène offscreen weergeeft, had de Snapdragon 8 Gen 1 een gemiddelde framerate van 49 fps. Ter vergelijking: de Snapdragon 8 Gen 2 haalde 65 FPS. Het is duidelijk dat de grafische prestaties zijn verbeterd, en sommige hiervan zijn grote winsten. Dat is een verbetering van 44% in de Aztec Ruins Vulkan-test en een verbetering van 24% in de Manhattan-test.

Een paar geweldige Android-games vereisen veel GPU-pk's, maar verbeterde GPU-prestaties zijn nuttig voor meer dan alleen gamen.

MLPerf

Qualcomm is bijzonder terughoudend geweest over details met betrekking tot verbeteringen op het gebied van kunstmatige intelligentie, en dat is altijd het geval geweest. We hebben geen cijfers voor TOPS (Trillion Operations Per Second), hoewel het bedrijf ons informatie heeft gegeven enkele tastbare verbeteringen, zoals een toename van 435% in de prestaties van kunstmatige intelligentie en 65% betere prestaties per watt. Bovenstaande resultaten laten zien hoe de Snapdragon 8 Gen 2 presteert in AI, en je kunt hem vergelijken met andere toestellen die zijn getest door MLCommons.

Conclusie en verwachte scores

De tabel die Qualcomm ons heeft gegeven met verwachte benchmarkscores staat hieronder, wat je kunt zien valt grotendeels in lijn met de resultaten die we hierboven hebben behaald.

Qualcomm zegt dat de eerste apparaten die worden aangedreven door de Snapdragon 8 Gen 2 eind 2022 hier zullen zijn. We zullen in de gaten houden hoe de Snapdragon 8 Gen 2 presteert in vergelijking met die van de MediaTek Dimensity 9200. Als u een upgrade uitvoert vanaf een apparaat dat minstens twee jaar ouder is, zullen de verbeteringen waarschijnlijk merkbaar zijn, hoewel de enorme winst in AI-prestaties waarschijnlijk door de meesten onopgemerkt zal blijven. Bedrijven maken zelden gebruik van het volledige potentieel van AI als het gaat om de chipsets van Qualcomm, en waarschijnlijk zal dat hier weer hetzelfde zijn.

Qualcomm heeft bevestigd dat de volgende bedrijven Snapdragon 8 Gen 2-aangedreven apparaten zullen lanceren: Redmagic, Honor, ZTE, Xiaomi, Meizu, Vivo, Sony, Redmi, OPPO, nubië, Motorola, OnePlus, Sharp, Asus, en iQOO. We kijken ernaar uit om deze chipset in de toekomst uit te proberen in een meer gecontroleerde setting in commerciële apparaten.