Benchmarking dello Snapdragon 8 Gen 2: stabilire le aspettative per gli smartphone di punta nel 2023

Proprio la scorsa settimana ha visto l'annuncio del Qualcomm Snapdragon 8 Gen 2 al vertice tecnologico dell'azienda alle Hawaii. L'ultimo chipset di Qualcomm racchiude specifiche aggiornate e sul processo di produzione TSMC, che, se l'8 Plus Gen 1 è qualcosa su cui basarsi, dovrebbe ottenere alcuni guadagni in termini di efficienza. Inoltre, mentre la società era riluttante a fornire dettagli tecnici approfonditi in alcuni aspetti (tra cui trascurare di menzionare il nome di una versione Adreno o Kryo), potremmo ancora eseguire una gamma di benchmark popolari sul riferimento Snapdragon 8 Gen 2 dispositivo. Questi benchmark aiutano a stabilire la linea di base delle aspettative di performance per le prossime ammiraglie nel 2023, dandoci qualcosa per cui guardare avanti.

A proposito di questo articolo: Qualcomm ha sponsorizzato il mio collega, Boschi Ricchi, per partecipare allo Snapdragon Tech Summit a Maui, Hawaii. La compagnia ha pagato per il volo e l'hotel. Tuttavia, Qualcomm non ha avuto alcun input in merito al contenuto di questo articolo.

Come abbiamo valutato lo Snapdragon 8 Gen 2

Sul dispositivo di riferimento Snapdragon 8 Gen 2 di Qualcomm, abbiamo eseguito un benchmark olistico (AnTuTu), un benchmark incentrato sulla CPU (Geekbench), un benchmark incentrato sulla GPU (GFXBench) e benchmark MLPerf. Ogni benchmark è stato eseguito tre volte e abbiamo preso la media dei tre risultati. Qualcomm aveva abilitato per impostazione predefinita un'opzione "UI Perf Mode" che abbiamo lasciato abilitata. Cerca effettivamente di forzare l'esecuzione delle app di benchmarking sui core Prime per ottenere un punteggio leggermente più alto in determinati benchmark, quindi tienilo a mente quando guardi questi risultati. Vale anche la pena notare che una volta che avremo messo le mani su un dispositivo commerciale con Qualcomm Snapdragon 8 Gen 2, ripeteremo questi benchmark.

Qualcomm ci ha fornito una serie di punteggi di benchmark attesi basati sui propri test. L'abbiamo usato solo come riferimento e in fondo a questo articolo è disponibile una tabella contenente i punteggi di riferimento che Qualcomm si aspettava che il dispositivo di riferimento raggiungesse.

Panoramica dei benchmark di Snapdragon 8 Gen 2

• AnTuTu: Questo è un benchmark olistico. AnTuTu testa le prestazioni di CPU, GPU e memoria, includendo sia test astratti che, di recente, simulazioni dell'esperienza utente correlabili (ad esempio, il test secondario che prevede lo scorrimento di un file Visualizzazione elenco). Il punteggio finale è ponderato in base alle considerazioni del progettista.
• GeekBench: questo è un test incentrato sulla CPU che utilizza diversi carichi di lavoro computazionali, tra cui crittografia, compressione (testo e immagini), rendering, simulazioni fisiche, visione artificiale, ray tracing, riconoscimento vocale e inferenza della rete neurale convoluzionale immagini. La suddivisione del punteggio fornisce metriche specifiche. Il punteggio finale è ponderato in base alle considerazioni del progettista, ponendo una grande enfasi sulle prestazioni intere (65%), quindi sulle prestazioni float (30%) e infine sulla crittografia (5%).
• GFXBench: mira a simulare il rendering della grafica dei videogiochi utilizzando le ultime API, che include molti effetti sullo schermo e trame di alta qualità. I test più recenti utilizzano Vulkan, mentre i test legacy utilizzano OpenGL ES 3.1. Le uscite sono frame durante il test e fotogrammi al secondo (l'altro numero diviso per la durata del test, essenzialmente) invece di un punteggio ponderato.
  • Rovine azteche: Questi test sono i più computazionalmente pesanti offerti da GFXBench. Attualmente, i migliori chipset mobili non possono sostenere 30 FPS. Nello specifico, il test offre una geometria con un numero di poligoni davvero elevato, tassellazione hardware, texture ad alta risoluzione, illuminazione globale e abbondante mappatura delle ombre, numerosi effetti particellari, oltre a fioritura e profondità di campo effetti. La maggior parte di queste tecniche sottolineerà le capacità di calcolo dello shader del processore.
  • Manhattan ES 3.0/3.1: Questo test rimane rilevante dato che i giochi moderni sono già arrivati ​​alla fedeltà grafica proposta e implementano lo stesso tipo di tecniche. Presenta geometrie complesse che impiegano target di rendering multipli, riflessioni (mappe cubiche), rendering mesh, molte fonti di illuminazione differite, nonché fioritura e profondità di campo in un passaggio di post-elaborazione.
• MLPerf mobile: MLPerf Mobile è un benchmark open source per testare le prestazioni dell'IA mobile. Era creato da MLCommons, un consorzio di ingegneria aperta senza scopo di lucro, per "offrire trasparenza e parità di condizioni per confrontare sistemi, software e sistemi di machine learning soluzioni”. La prima iterazione di MLPerf Mobile fornisce un benchmark delle prestazioni di inferenza per una manciata di visione artificiale e linguaggio naturale compiti di elaborazione. Per ulteriori informazioni, fare riferimento a questo articolo intitolato "Benchmark di inferenza mobile MLPerf: perché il benchmarking AI mobile è difficile e cosa fare al riguardo".
  • Classificazione delle immagini: Questo test comporta la deduzione di un'etichetta da applicare a un'immagine di input. I casi d'uso tipici includono ricerche di foto o estrazione di testo. Il modello di riferimento utilizzato è MobileNetEdgeTPU con parametri 4M, il dataset è ImageNet 2012 (224×224) e il target qualitativo è il 98% di FP32 (76,19% Top-1).
  • Segmentazione dell'immagine: Questo test comporta il partizionamento di un'immagine di input in oggetti etichettati. I casi d'uso tipici includono la guida autonoma o il telerilevamento. Il modello di riferimento utilizzato è DeepLab v3+ con parametri 2M, il set di dati è ADE20K (512×512) e l'obiettivo di qualità è il 93% di FP32 (0,244 mAP).
  • Rilevamento di oggetti: Questo test comporta il disegno di riquadri di delimitazione attorno agli oggetti e la fornitura di un'etichetta per tali oggetti. I casi d'uso tipici riguardano l'input della telecamera, ad esempio per il rilevamento dei pericoli o l'analisi del traffico durante la guida. Il modello di riferimento è SSD-MobileNet v2 con 17 milioni di parametri, il dataset è COCO 2017 (300×300) e l'obiettivo di qualità è il 97% di FP32 (54,8% mIoU).
  • Elaborazione del linguaggio: Questo test prevede di rispondere alle domande in modo colloquiale. I casi d'uso tipici includono i motori di ricerca online. Il modello di riferimento è MobileBERT con 25 milioni di parametri, il set di dati è mini Squad (Stanford Question Answering Dataset) v1.1 dev e l'obiettivo di qualità è il 93% di FP32 (93,98% F1).

Risultati di riferimento

Antutu

Come negli anni precedenti, stiamo assistendo a un miglioramento del 10% nel punteggio AnTuTu con lo Snapdragon 8 Gen 2 di quest'anno. Questo è un miglioramento abbastanza sostanziale che suggerisce già dall'inizio che lo Snapdragon 8 Gen 2 è un chipset più potente di ogni altro chip Qualcomm finora. Non è del tutto in linea con le prestazioni della CPU più veloci del 35%, ma essendo AnTuTu un benchmark olistico, ciò non significa necessariamente che rifletterà interamente eventuali guadagni della CPU.

Geekbench 5

Geekbench, invece, È una metrica delle prestazioni incentrata sulla CPU. Vediamo guadagni di quasi il 30% nelle prestazioni multi-core, che sembrano essere sulla buona strada per il miglioramento del 35% pubblicizzato da Qualcomm. I benchmark non rifletteranno sempre questi guadagni misurati da Qualcomm, ma ciò è dovuto alla differenza nella misurazione. Ogni strumento ha un modo diverso che utilizza per calcolare i punteggi e testare i chipset, e il modo di Geekbench potrebbe non esporre necessariamente quei miglioramenti che Qualcomm avrà apportato. Un miglioramento del 30% che si riflette in un miglioramento anno dopo anno è ancora impressionante.

GFXBench

Qualcomm non ha rivelato molto sulla GPU Adreno nello Snapdragon 8 Gen 2, quindi abbiamo poco da dire sulla GPU oltre ai suoi guadagni in termini di prestazioni. Non conosciamo il numero di core, non conosciamo la frequenza e non abbiamo nemmeno un numero di versione. Questo è un cambiamento avvenuto con Snapdragon 8 Gen 1 ed è frustrante quando si confrontano le GPU. È molto più facile spiegare le differenze nel contesto dei numeri di versione piuttosto che nominare il chip particolare ogni volta tempo.

Tuttavia, i risultati mostrano un miglioramento complessivo delle prestazioni grafiche, stranamente a parte il test T-Rex di GFXBench. Questo test è un test a bassa intensità, quindi non ci metterei molto a parte il fatto che ha un frame rate inferiore. Potrebbe benissimo essere semplicemente un'ottimizzazione e gli altri test più intensivi hanno risultati decisamente migliori. Nel test Manhattan di GFXBench, che utilizza l'API OpenGL ES 3.1 e rende una scena a 1080p fuori dallo schermo, lo Snapdragon 8 Gen 1 aveva un framerate medio di 179 FPS. Al contrario, lo Snapdragon 8 Gen 2 ha raggiunto i 222 FPS.

Nel test Aztec Ruins di GFXBench, che utilizza l'API grafica Vulkan e rende una scena a 1080p fuori dallo schermo, lo Snapdragon 8 Gen 1 aveva un framerate medio di 49 fps. In confronto, lo Snapdragon 8 Gen 2 ha tirato fuori 65 FPS. È chiaro che le prestazioni grafiche sono migliorate e alcuni di questi sono grandi guadagni. Questo è un miglioramento del 44% nel test Aztec Ruins Vulkan e un miglioramento del 24% nel test Manhattan.

Solo alcuni grandi giochi Android richiedono molta potenza della GPU, ma il miglioramento delle prestazioni della GPU è utile non solo per i giochi.

MLPerf

Qualcomm è stata particolarmente cauta riguardo alle specifiche riguardanti i miglioramenti dell'intelligenza artificiale, ed è sempre stato così. Non abbiamo cifre per TOPS (Trillion Operations Per Second), sebbene la società ci abbia fornito informazioni in merito alcuni miglioramenti tangibili, come un aumento del 435% delle prestazioni dell'intelligenza artificiale e un miglioramento delle prestazioni del 65% per watt. I risultati sopra mostrano le prestazioni di Snapdragon 8 Gen 2 in IA e puoi confrontarlo con altri dispositivi che sono stati testati da MLCommons.

Conclusione e punteggi attesi

Di seguito è riportata la tabella che Qualcomm ci ha fornito con i punteggi di riferimento attesi, che potete vedere per lo più in linea con i risultati che abbiamo ottenuto sopra.

Qualcomm afferma che i primi dispositivi alimentati dallo Snapdragon 8 Gen 2 arriveranno entro la fine del 2022. Terremo d'occhio le prestazioni di Snapdragon 8 Gen 2 rispetto a dispositivi del calibro di MediaTek Dimensione 9200. Se stai eseguendo l'aggiornamento da un dispositivo che ha almeno due anni in più, i miglioramenti saranno probabilmente evidenti, anche se i massicci guadagni nelle prestazioni dell'IA probabilmente passeranno inosservati alla maggior parte. Le aziende raramente sfruttano tutto il potenziale dell'intelligenza artificiale quando si tratta dei chipset di Qualcomm, ed è probabile che anche qui sarà lo stesso.

Qualcomm ha confermato che le seguenti aziende lanceranno dispositivi basati su Snapdragon 8 Gen 2: Redmagic, Onore, ZTE, Xiaomi, Meizu, Vivo, Sony, Redmi, OPPO, nubia, Motorola, OnePlus, Sharp, Asus, e QOO. Non vediamo l'ora di provare questo chipset in un ambiente più controllato nei dispositivi commerciali in futuro.