Benchmarking af Snapdragon 8 Gen 2: Sætter forventninger til flagskibssmartphones i 2023

I sidste uge blev meddelelsen af Qualcomm Snapdragon 8 Gen 2 på virksomhedens tech-topmøde på Hawaii. Qualcomms seneste chipset indeholder opgraderede specifikationer og på TSMC-fremstillingsprocessen, som, hvis 8 Plus Gen 1 er noget at gå efter, burde give nogle effektivitetsgevinster. Oven i det, mens virksomheden var tøvende med at give dybdegående tekniske detaljer i nogle aspekter (inklusive at forsømme at nævne et Adreno- eller Kryo-versionsnavn), kunne vi stadig køre en række populære benchmarks på Snapdragon 8 Gen 2-referencen enhed. Disse benchmarks hjælper med at sætte basislinjen for præstationsforventninger til kommende flagskibe i 2023, hvilket giver os noget at se frem til.

Om denne artikel: Qualcomm sponsorerede min kollega, Rich Woods, for at deltage i Snapdragon Tech Summit i Maui, Hawaii. Selskabet betalte for hans fly og hotel. Qualcomm havde dog ikke noget input til indholdet af denne artikel.

Hvordan vi benchmarkerede Snapdragon 8 Gen 2

På Snapdragon 8 Gen 2 referenceenheden fra Qualcomm kørte vi ét holistisk benchmark (AnTuTu), et CPU-centreret benchmark (Geekbench), et GPU-centreret benchmark (GFXBench) og MLPerf benchmarks. Hvert benchmark blev kørt tre gange, og vi tog gennemsnittet af de tre resultater. Qualcomm havde som standard aktiveret en "UI Perf Mode"-indstilling, som vi forlod aktiveret. Det forsøger effektivt at tvinge benchmarking-apps til at køre på Prime-kerner for at opnå en lidt højere score i visse benchmarks, så husk dette, når du ser over disse resultater. Det er også værd at bemærke, at når vi får fingrene i en kommerciel enhed med Qualcomm Snapdragon 8 Gen 2, vil vi køre disse benchmarks igen.

Qualcomm forsynede os med et sæt forventede benchmarkscore baseret på deres egne tests. Vi brugte dette kun til reference, og en tabel er tilgængelig nederst i denne artikel, der indeholder de benchmarkscore, som Qualcomm forventede, at referenceenheden ville opnå.

Snapdragon 8 Gen 2 benchmarks oversigt

• AnTuTu: Dette er et holistisk benchmark. AnTuTu tester CPU-, GPU- og hukommelsesydelsen, mens den inkluderer både abstrakte tests og for sent, relaterbare brugeroplevelsessimuleringer (for eksempel undertesten, der involverer at rulle gennem en Listevisning). Den endelige score vægtes efter designerens overvejelser.
• GeekBench: Dette er en CPU-centreret test, der bruger flere beregningsmæssige arbejdsbelastninger, herunder kryptering, komprimering (tekst og billeder), gengivelse, fysiksimuleringer, computersyn, strålesporing, talegenkendelse og konvolutionel neurale netværksslutning om billeder. Resultatopdelingen giver specifikke målinger. Den endelige score vægtes i henhold til designerens overvejelser, idet der lægges stor vægt på heltals ydeevne (65 %), derefter flydende ydeevne (30 %) og endelig kryptografi (5 %).
• GFXBench: Sigter på at simulere gengivelse af videospilgrafik ved hjælp af de nyeste API'er, som inkluderer en masse skærmeffekter og højkvalitetsteksturer. Nyere test bruger Vulkan, mens ældre test bruger OpenGL ES 3.1. Udgangene er rammer under testen og billeder per sekund (det andet tal divideret med testlængden, i det væsentlige) i stedet for en vægtet score.
  • Aztekiske ruiner: Disse test er de mest beregningstunge, der tilbydes af GFXBench. I øjeblikket kan de bedste mobile chipsæt ikke opretholde 30 FPS. Specifikt tilbyder testen virkelig høj polygonantal geometri, hardware tessellation, højopløselige teksturer, global belysning og masser af skyggekortlægning, rigelige partikeleffekter samt opblomstring og dybdeskarphed effekter. De fleste af disse teknikker vil understrege processorens shader-computeregenskaber.
  • Manhattan ES 3.0/3.1: Denne test forbliver relevant, da moderne spil allerede er nået frem til dens foreslåede grafiske troskab og implementerer de samme slags teknikker. Den har kompleks geometri, der anvender flere gengivelsesmål, refleksioner (kubiske kort), mesh-gengivelse, mange udskudte lyskilder samt opblomstring og dybdeskarphed i et efterbehandlingspas.
• MLPerf mobil: MLPerf Mobile er et open source benchmark til test af mobil AI-ydeevne. Det var oprettet af MLCommons, et non-profit, åbent ingeniørkonsortium, for at "levere gennemsigtighed og lige vilkår for sammenligning af ML-systemer, software og løsninger." MLPerf Mobiles første iteration giver en inferens-ydeevne benchmark for en håndfuld computersyn og naturligt sprog bearbejdningsopgaver. For mere information, se dette papir med titlen "MLPerf Mobile Inference Benchmark: Hvorfor Mobile AI Benchmarking er svært, og hvad man skal gøre ved det."
  • Billedklassificering: Denne test involverer at udlede en etiket, der skal anvendes på et inputbillede. Typiske brugstilfælde omfatter fotosøgninger eller tekstudtræk. Den anvendte referencemodel er MobileNetEdgeTPU med 4M parametre, datasættet er ImageNet 2012 (224×224), og kvalitetsmålet er 98 % af FP32 (76,19 % Top-1).
  • Billedsegmentering: Denne test involverer opdeling af et inputbillede i mærkede objekter. Typiske anvendelsestilfælde omfatter selvkørende eller fjernmåling. Den anvendte referencemodel er DeepLab v3+ med 2M parametre, datasættet er ADE20K (512×512), og kvalitetsmålet er 93 % af FP32 (0,244 mAP).
  • Objektdetektion: Denne test involverer at tegne afgrænsningsfelter omkring objekter og give en etiket til disse objekter. Typiske brugssager involverer kamerainput, såsom til fareregistrering eller trafikanalyse under kørsel. Referencemodellen er SSD-MobileNet v2 med 17M parametre, datasættet er COCO 2017 (300×300), og kvalitetsmålet er 97% af FP32 (54,8% mIoU).
  • Sprogbehandling: Denne test involverer besvarelse af spørgsmål i daglig tale. Typiske anvendelsestilfælde omfatter online søgemaskiner. Referencemodellen er MobileBERT med 25M parametre, datasættet er mini Squad (Stanford Question Answering Dataset) v1.1 dev, og kvalitetsmålet er 93% af FP32 (93,98% F1).

Benchmark resultater

Antutu

Som det er tilfældet i tidligere år, ser vi omkring 10 % forbedring i AnTuTu-score med dette års Snapdragon 8 Gen 2. Dette er en væsentlig nok forbedring, der allerede fra starten antyder, at Snapdragon 8 Gen 2 er et mere kraftfuldt chipsæt end alle andre Qualcomm-chips indtil videre. Det er ikke helt på linje med den 35 % hurtigere CPU-ydeevne, men med AnTuTu som et holistisk benchmark, betyder det ikke nødvendigvis, at det helt vil afspejle enhver CPU-gevinst.

Geekbench 5

Geekbench, dog er en CPU-centreret målestok for ydeevne. Vi ser næsten 30% gevinster i multi-core ydeevne, hvilket ser ud til at være på vej til de 35% forbedring, som Qualcomm annoncerer. Benchmarks vil ikke altid afspejle disse gevinster, som Qualcomm måler, men det er på grund af forskellen i måling. Hvert værktøj har en anden måde, det bruger, når det beregner scores og testchipsæt, og Geekbenchs måde afslører måske ikke nødvendigvis de forbedringer, som Qualcomm vil have lavet. En forbedring på 30 %, der afspejles i en år-til-år forbedring, er stadig imponerende.

GFXBench

Qualcomm har ikke afsløret meget om Adreno GPU'en i Snapdragon 8 Gen 2, så vi har lidt at sige om GPU'en udover dens gevinster i ydeevne. Vi kender ikke kerneantallet, vi kender ikke frekvensen, og vi har ikke engang et versionsnummer. Dette er en ændring, der skete med Snapdragon 8 Gen 1, og det er frustrerende, når man sammenligner GPU'er. Det er meget lettere at forklare forskelle i sammenhæng med versionsnumre frem for at navngive den bestemte chip hver eneste tid.

Ikke desto mindre viser resultaterne en generel forbedring af grafikydeevnen, mærkeligt nok bortset fra GFXBenchs T-Rex-test. Denne test er en lav-intensitetstest, så jeg ville ikke sætte meget i den udover det faktum, at den har en lavere billedhastighed. Det kunne sagtens være tilfældet, at det blot er en optimering, og de andre, mere intensive tests har langt bedre resultater. I GFXBenchs Manhattan-test, som bruger OpenGL ES 3.1 API og gengiver en 1080p-scene uden for skærmen, havde Snapdragon 8 Gen 1 en gennemsnitlig framerate på 179 FPS. I modsætning hertil ramte Snapdragon 8 Gen 2 222 FPS.

I GFXBenchs Aztec Ruins-test, som bruger Vulkan grafik API og gengiver en 1080p scene uden for skærmen, havde Snapdragon 8 Gen 1 en gennemsnitlig framerate på 49fps. Til sammenligning trak Snapdragon 8 Gen 2 65 FPS ud. Det er tydeligt, at grafikydelsen er blevet forbedret, og nogle af disse er store gevinster. Det er en forbedring på 44 % i Aztec Ruins Vulkan-testen og en forbedring på 24 % i Manhattan-testen.

Kun nogle gode Android-spil kræver mange GPU-hestekræfter, men forbedret GPU-ydeevne er nyttig til mere end bare spil.

MLPerf

Qualcomm har været særlig opmærksom på detaljer vedrørende forbedringer af kunstig intelligens, og det har altid været tilfældet. Vi har ingen tal for TOPS (Trillion Operations Per Second), selvom virksomheden har givet os oplysninger om nogle håndgribelige forbedringer, som en 435% stigning i kunstig intelligens ydeevne og 65% bedre ydeevne pr. watt. Ovenstående resultater viser, hvordan Snapdragon 8 Gen 2 klarer sig i AI, og du kan sammenligne det med andre enheder der er blevet testet af MLCommons.

Konklusion og forventet score

Tabellen, som Qualcomm gav os forventede benchmark-scores, er nedenfor, som du kan se falder mest på linje med de resultater, vi opnåede ovenfor.

Qualcomm siger, at de første enheder, der drives af Snapdragon 8 Gen 2, vil være her ved udgangen af ​​2022. Vi vil holde øje med, hvordan Snapdragon 8 Gen 2 klarer sig sammenlignet med f.eks. MediaTek Dimensity 9200. Hvis du opgraderer fra en enhed, der er mindst to år ældre, vil forbedringerne sandsynligvis være mærkbare, selvom de massive gevinster i AI-ydeevne sandsynligvis vil gå ubemærket hen af ​​de fleste. Virksomheder udnytter sjældent det fulde potentiale af AI, når det kommer til Qualcomms chipsæt, og det er sandsynligt, at det vil være det samme igen her.

Qualcomm bekræftede, at følgende virksomheder vil lancere Snapdragon 8 Gen 2-drevne enheder: Redmagic, Honor, ZTE, Xiaomi, Meizu, Vivo, Sony, Redmi, OPPO, nubia, Motorola, OnePlus, Sharp, Asus, og iQOO. Vi ser frem til at prøve dette chipsæt i en mere kontrolleret indstilling i kommercielle enheder i fremtiden.