Бенцхмаркинг Куалцомм Снапдрагон 8 Ген 1: Очекивања перформанси од водећих модела за 2022.

Прошле недеље је дошло до појаве новог Куалцомм Снапдрагон 8 Ген 1 на технолошком самиту компаније на Хавајима. Најновији Куалцомм-ов сет чипова садржи читав низ великих побољшања широм света, што га чини једним од најузбудљивијих Куалцомм уређаја у дужем временском периоду. Иако је компанија оклевала да пружи детаљне техничке детаље у неким аспектима (укључујући занемаривање да поменемо назив верзије Адрено или Крио), и даље смо били у могућности да покренемо низ популарних бенцхмарк-ова на Снапдрагон 8 Ген 1 референтни уређај. Ова мерила помажу да се постави основна очекивања перформанси за надолазеће водеће моделе у 2022. години, дајући нам још једну ствар којој се радујемо следеће године.

На референтном уређају Снапдрагон 8 Ген 1, извршили смо један холистички бенцхмарк (АнТуТу), референтни тест усредсређен на ЦПУ (Геекбенцх), тест за ГПУ (ГФКСБенцх) и МЛПерф бенцхмарк. Сваки бенчмарк је вођен три пута, а ми смо узели просек три резултата. Куалцомм је подразумевано омогућио опцију „УИ Перф Моде“ коју смо онемогућили, јер она ефективно покушава да принуди бенцхмаркинг апликације које ће се покретати на Приме језгрима како би се постигао нешто већи резултат мерила. Такође је вредно напоменути да ћемо када добијемо комерцијални уређај са Куалцомм Снапдрагон 8 Ген 1, поново покренути ове тестове.

Ако сте заинтересовани да прочитате све спецификације и карактеристике мобилног телефона Куалцомм Снапдрагон 8 Ген 1 платформу коју је компанија до сада учинила доступном, онда препоручујем да прочитате наш објашњење о Куалцомм Снапдрагон 8 Ген 1. За брзу референцу, саставио сам графикон у коме поредим кључне спецификације Куалцомм Снапдрагона Референтни уређај 8 Ген 1 у поређењу са друга два референтна уређаја коришћена у овом поређењу. Тај графикон можете пронаћи испод, испред резултата бенчмарка.

Куалцомм нам је обезбедио скуп очекиваних резултата на основу сопственог тестирања. Користили смо ово само за референцу, а табела је доступна на дну овог чланка која садржи бенцхмарк резултате које је Куалцомм очекивао да ће референтни уређај постићи.

О овом чланку: Куалцомм је спонзорисао мог колегу, Рицх Воодс, да присуствују самиту Снапдрагон Тецх у Кони на Хавајима. Компанија је платила његов лет и хотел. Међутим, Куалцомм није имао никакав допринос у вези са садржајем овог чланка.

Резултати теста Куалцомм Снапдрагон 8 Ген 1

Тестирајте спецификације уређаја

Преглед мерила. Кликните да бисте проширили.

Преглед референтних вредности

• АнТуТу: Ово је холистички стандард. АнТуТу тестира перформансе ЦПУ-а, ГПУ-а и меморије, укључујући и апстрактне тестове и, у последње време, повезане симулације корисничког искуства (на пример, субтест који укључује померање кроз а ЛистВиев). Коначна оцена је пондерисана у складу са разматрањима дизајнера.
• ГеекБенцх: ЦПУ-центричан тест који користи неколико рачунарских оптерећења укључујући шифровање, компресију (текст и слике), рендеровање, симулације физике, компјутерски вид, праћење зрака, препознавање говора и конволуциони закључак неуронске мреже на сликама. Анализа резултата даје специфичне метрике. Коначни резултат је пондерисан у складу са разматрањима дизајнера, стављајући велики нагласак на целобројне перформансе (65%), затим на перформансе са плутањем (30%) и на крају на криптографију (5%).
• ГФКСБенцх: Циљ је да симулира графику видео игрица користећи најновије АПИ-је. Много ефеката на екрану и висококвалитетних текстура. Новији тестови користе Вулкан док застарели тестови користе ОпенГЛ ЕС 3.1. Излази су оквири током теста и фрејмова у секунди (други број подељен са дужином теста, у суштини), уместо пондерисаног резултат.
  • Азтец Руинс: Ови тестови су рачунарски најтежи тестови које нуди ГФКСБенцх. Тренутно, врхунски мобилни чипсетови не могу да издрже 30 кадрова у секунди. Конкретно, тест нуди заиста високу геометрију полигона, хардверску теселацију, текстуре високе резолуције, глобално осветљење и обиље мапирања сенки, обилни ефекти честица, као и цветање и дубина поља ефекти. Већина ових техника ће нагласити могућности процесора за рачунање схадера.
  • Манхаттан ЕС 3.0/3.1: Овај тест остаје релевантан с обзиром да су модерне игре већ достигле предложену графичку верност и имплементирају исте врсте техника. Има сложену геометрију која користи вишеструке циљеве рендеровања, рефлексије (кубичне мапе), мрежно приказивање, многе одложене изворе осветљења, као и цветање и дубину поља у пролазу за накнадну обраду.
• МЛПерф Мобиле: МЛПерф Мобиле је бенцхмарк отвореног кода за тестирање перформанси мобилне вештачке интелигенције. Било је креирао МЛЦоммонс, непрофитни, отворени инжењерски конзорцијум, да „пружи транспарентност и једнаке услове за поређење МЛ система, софтвера и решења.” Прва итерација МЛПерф Мобиле-а пружа референтну вредност перформанси закључивања за прегршт компјутерског вида и природног језика задатака обраде. За више информација погледајте рад „МЛПерф Мобиле Инференце Бенцхмарк: Зашто је мобилно АИ бенцхмаркинг тешко и шта учинити у вези с тим.”
  • Класификација слика: Овај тест укључује закључивање ознаке која се примењује на улазну слику. Типични случајеви употребе укључују претрагу фотографија или екстракцију текста. Коришћени референтни модел је МобилеНетЕдгеТПУ са 4М параметрима, скуп података је ИмагеНет 2012 (224×224), а циљ квалитета је 98% ФП32 (76,19% Топ-1).
  • Сегментација слике: Овај тест укључује партиционисање улазне слике на означене објекте. Типични случајеви употребе укључују самовожњу или даљинско испитивање. Референтни модел који се користи је ДеепЛаб в3+ са 2М параметрима, скуп података је АДЕ20К (512×512), а циљ квалитета је 93% ФП32 (0,244 мАП).
  • Откривање објеката: Овај тест укључује цртање граничних оквира око објеката као и обезбеђивање ознаке за те објекте. Типични случајеви употребе укључују улаз камере, као што је откривање опасности или анализа саобраћаја током вожње. Референтни модел је ССД-МобилеНет в2 са 17М параметара, скуп података је ЦОЦО 2017 (300×300), а циљ квалитета је 97% ФП32 (54,8% мИоУ).
  • Обрада језика: Овај тест подразумева колоквијално одговарање на питања. Типични случајеви употребе укључују интернет претраживаче. Референтни модел је МобилеБЕРТ са 25М параметара, скуп података је мини Скуад (Станфорд Куестион Ансверинг Датасет) в1.1 дев, а циљ квалитета је 93% ФП32 (93,98% Ф1).

Опширније

---

Бенцхмарк Ресултс

АнТуТу

Почевши од АнТуТу-а, можемо видети да је референтни уређај Куалцомм Снапдрагон 8 Ген 1 постигао знатно више него претходних година, са великим порастом у односу на претходну годину од отприлике 240.000 бодова. Ово је прилично велико побољшање од отприлике 33%, што је знатно изнад обећања компаније Куалцомм о побољшању брзине од 20%. Ово је само један тест, али АнТуТу је одличан алат за поређење сирових рачунарских способности између уређаја, чак и ако се све то не преведе у употребу у стварном свету.

Геекбенцх

У Геекбенцху 5.0, међутим, то је сасвим друга прича. Снапдрагон 8 Ген 1 показује мало или нимало предности у односу на Снапдрагон 888 референтни уређај у односу на претходни, и у ствари, чак и назадује у перформансама када је у питању вишејезгарни уређај. Није ни то као да смо погрешили – Куалцомм нам је дао информативну страницу са референтним резултатима које можемо очекивати од Снапдрагон 8 Ген 1, и они су у складу са оним што би требало очекивати. У ствари, перформансе једног језгра биле су веће од горњих граница које нам је Куалцомм дао, док су перформансе са више језгара биле 20 поена испод доњих граница онога што можемо очекивати.

Рекавши то, мислим да је јасно да шта год да је тест, то није тестирање где је Куалцомм направио побољшања. Наши други тестови показују велика побољшања у односу на чипсетове из претходних година.

ГФКСБенцх

Куалцомм није открио много о новом Адрено ГПУ-у у Снапдрагон 8 Ген 1, тако да имамо мало тога да кажемо о ГПУ-у осим његових добитака у перформансама. Не знамо број језгара, не знамо фреквенцију, а чак немамо ни број верзије. У ГФКСБенцховом тесту на Менхетну, који користи ОпенГЛ ЕС 3.0 АПИ и приказује сцену од 1080п ван екрана, Снапдрагон 8 Ген 1 је имао просечна брзина кадрова у секунди од 221 кадрова у секунди, око 31% и 75% већа од брзине коју су постигли Снапдрагон 888 и 865 редом. У ГФКСБенцх-овом тесту Азтец Руинс, који користи Вулкан графички АПИ и приказује сцену од 1080п ван екрана, Снапдрагон 8 Ген 1 је имао просечну брзину кадрова од 41 кадра у секунди. Ипак, постоји упозорење; претходни резултати на референтним уређајима су тестирани у 1080п, док је једини тест Астечких рушевина којем смо имали приступ био у 1440п. Повећање на 1080п захтева 43,75% више пиксела да се истовремено прикаже, због чега су перформансе смањене у овом тесту.

Само неке од веома најбоље Андроид игре захтевају много коњских снага ГПУ-а, али побољшане перформансе ГПУ-а су корисне за више од само играња игара. Рекавши то, играње је дефинитивно највећи разлог зашто ће људима бити стало до ових бенцхмарк резултата и Чини се да Снапдрагон 8 Ген 1 пружа 35% брже графичко приказивање и 20% бољу енергетску ефикасност годину дана касније године. Међутим, ови резултати само показују врхунске перформансе ГПУ-а, тако да ћемо морати поново да погледамо ГФКСБенцх - када се докопамо комерцијалног хардвера — да бисмо дугорочним перформансама мерила тестови.

МЛПерф

Куалцомм је био посебно опрезан у погледу специфичности када су у питању побољшања вештачке интелигенције. Немамо никакве бројке за ТОПС (трилион операција у секунди), иако имамо неке информације о другим побољшањима. На пример, постоји трећа генерација сензорског чворишта компаније, а такође је демонстрирала низ других карактеристика специфичних за СоЦ на Хавајима.

Међутим, тешко нам је да покажемо колико је значајан овај скок у перформансама. Детаљно смо разговарали о потешкоћама у бенчмаркингу АИ током наших интервјуа са Куалцомм-ов Травис Ланиер, Гари Бротман и Зиад Асгхар. Добра вест је да је, од наших разговора са руководиоцима компаније Куалцомм, дошло до значајног напретка у области АИ мерила.

Тренутно доступна мерила која највише обећавају долазе у облику МЛПерф Мобиле-а, који је опен-соурце мобиле АИ бенцхмарк подржан од стране више произвођача СоЦ-а, провајдера МЛ фрамеворк-а и модела произвођачи. Његова почетна серија резултата мобилног закључивања је јавна, па смо те резултате искористили да упоредимо Снапдрагон 8 Ген 1 са Снапдрагоном 888 у Ксиаоми Мик 4, Дименсити 1100 у Виво С9 5Г и Екинос 2100 у Самсунг Галаки С21 Плус. Нисмо добили резултате кашњења — само бројке о протоку — тако да нисмо исцртали пуне резултате које су продавци поднели на верификацију од стране МЛЦоммонс-а.

У овим одабраним мерилима за закључивање рачунарског вида и обраде природног језика, можемо видети да је референтни уређај Куалцомм Снапдрагон 8 Ген 1 постигао највише резултате у сва четири теста од далеко. Деменсити 1100 је генерално прошао прилично лоше. Куалцомм-ов Снапдрагон 888 је и даље удобно победио остале у овом тесту, али Снапдрагон 8 Ген 1 је на другом нивоу у свим овим тестовима.

Биће занимљиво видети које апликације и функције програмери и ОЕМ произвођачи могу да креирају користећи АИ снагу Снапдрагона 8 Ген 1. Компјутерски вид ће играти посебно важну улогу у многим видеографским функцијама побољшаним вештачком интелигенцијом вероватно видети 2022. године, док побољшане перформансе НЛП-а могу такође утицати на суседне аспекте видеа као што је аудио снимање. Компаније као што је Гоогле раде на Гоогле Тенсор такође ће гурнути друге добављаче СоЦ-а у овом одељењу.

Закључак

Табела коју нам је Куалцомм обезбедио са очекиваним бенцхмарк резултатима је испод, што можете видети да је углавном у складу са резултатима које смо постигли изнад.

Очекивани референтни резултати за референтни дизајн Снапдрагон 8 Ген 1 (од компаније Куалцомм)

Бенцхмарк	Версион	Метод	Очекивани опсег резултата
Систем	Геекбенцх СТ	в5.4.2	Просек од 3 итерације	~1220 - 1233
Систем	Геекбенцх МТ	в5.4.2	Просек од 3 итерације	~3770 - 3810
Систем	АнТуТу	в9.2.1	Просек од 3 итерације	1. трчање: ~1мАвг од 3 итерације: ~980К
Систем	ПЦМарк	в3.0.4061	Просек од 3 итерације	~17к
Прегледач (Цхроме в95.0.4638.74 64-бит)	ЈетСтреам	в2.0	Просек од 3 итерације	~135 - 140
Прегледач	Спеедометер	в2.0	Просек од 3 итерације	~123 - 126
Прегледач	ВебКСПРТ	в3.0	Просек од 3 итерације	~194 - 197
АИ	АИТуТу	в2.0	Просек од 3 итерације	~2,550,000 - 2,600,000
АИ	АИМарк	в3.0	Просек од 3 итерације	~97К
АИ	МЛПерф (на засебном КРД-у јер је потребно 30 минута да се покрене)	в1.1	Просек од 3 итерације	Класа слике: ~2435 - 2450 Откривање објеката: ~1180 - 1250 Сегмент слике: ~520 - 540 Разумевање језика: ~38 - 40 Класа слике (ван мреже): ~3580 - 3650
АИ	ЕТХ АИБ	в4.0.4	Просек од 3 итерације	~530 - 550 хиљада
Графика	ГФКСБенцх Манхаттан 3.0 ван екрана (1080п) (ФПС)	в5.0	Просек од 3 итерације	~267 - 268 фпс
Графика	ГФКСБенцх Т-Рек – ван екрана (1080п) (ФПС)	в5.0	Просек од 3 итерације	~450 - 452 фпс
Графика	ГФКСБенцх Манхаттан 3.1 ван екрана (1080п) (ФПС)	в5.0	Просек од 3 итерације	~176 ФПС
Графика	ГФКСБенцх Цар Цхасе ван екрана (1080п) ЕС3.1 (ФПС)	в5.0	Просек од 3 итерације	~97 - 98 фпс
Графика	ГФКСБенцх Азтец Руинс Вулкан (високи ниво) ван екрана (1440п) (ФПС)	в5.0	Просек од 3 итерације	~49 ФПС
Графика	ГФКСБенцх Азтец Руинс ОпенГЛ (високи ниво) ван екрана (1440п) (ФПС)	в5.0	Просек од 3 итерације	~43 ФПС

Опширније

Снапдрагон 8 Ген 1 доноси гомилу побољшања у односу на прошлогодишњи чипсет, посебно када је у питању АИ. Иако дефинитивно постоји нека чудност у резултатима Геекбенцх-а везаним за ЦПУ, јасно је да постоје свеобухватна побољшања. Ако вршите надоградњу са уређаја који је две године старији (или старији), онда ће побољшања вероватно бити приметна, иако ће огромна побољшања у перформансама вештачке интелигенције већина вероватно остати непримећена. Компаније ретко користе пуни потенцијал вештачке интелигенције када су у питању Куалцоммови чипсетови, а вероватно ће и овде бити исто.

Такође је вредно напоменути да би са загревањем конкуренције можда било вредно сачекати да видимо шта ће Самсунг и МедиаТек следеће урадити. Тхе Димензија 9000 чипсет има потенцијал да се суочи са Снапдрагон 8 Ген 1 када су перформансе у питању, а још увек не знамо много о предстојећем Екинос 2200. Лично се радујем поновном прегледу ових мерила на комерцијалном уређају у будућности, посебно у контролисанијем окружењу.