Куалцомм Снапдрагон 888 бенцхмаркс: Ево како ће се водећи 5Г телефони из 2021.

Раније овог месеца, Куалцомм је позвао новинаре на виртуелни Снапдрагон Тецх Самит где најавили су Снапдрагон 888 мобилна платформа. Најновија Куалцомм-ова 8 серија СоЦ доноси велика побољшања у процесу обраде слика и машинског учења, али само постепена побољшања перформанси ЦПУ-а и ГПУ-а. Да бисмо сазнали колико је најновији Куалцоммов чипсет моћнији, обично имамо прилику да покренемо бенцхмаркове на његовом референтном хардверу. Међутим, због ЦОВИД-19, Куалцомм није могао да организује личну сесију бенцхмаркинга, па су уместо тога послали нам је унапред снимљен видео који приказује Куалцомм Снапдрагон 888 референтни уређај који ради у распону популарних мерила.

На референтном уређају Снапдрагон 888, Куалцомм је покренуо једно холистичко мерило (АнТуТу), референтну вредност усредсређену на ЦПУ (Геекбенцх), мерило за ГПУ (ГФКСБенцх) и неколико АИ/МЛ мерила (АИМарк, АИТуТу, МЛПерф и Процион). Сваки бенцхмарк је покренут три пута, тако да је компанија поделила просечан резултат у три итерације. Поред тога, компанија каже да су покренули сваки бенцхмарк користећи подразумевана подешавања на референтном дизајну Снапдрагон 888, што значи да нису омогућили никакав режим високих перформанси. Међутим, пошто су референтни резултати дати за нас, не можемо сами да проверимо резултате или услове тестирања. Када се дочепамо комерцијалног уређаја са Куалцомм Снапдрагон 888, поново ћемо покренути ове тестове.

Ако сте заинтересовани да прочитате све спецификације и карактеристике мобилне платформе Куалцомм Снапдрагон 888, онда препоручујем да прочитате Одличан објашњавач Идреес Пател за Снапдрагон 888 објављено раније овог месеца. Његов чланак детаљно говори о свим побољшањима која је Куалцомм направио за ЦПУ, ГПУ, модем, подсистем повезивања, ИСП, АИ мотор, ДСП и све остало. За брзу референцу, саставио сам графикон у коме поредим кључне спецификације референтног уређаја Куалцомм Снапдрагон 888 у поређењу са друга два уређаја коришћена у овом бенцхмарк поређењу: референтни уређај са Снапдрагон 865 и Пикел 4 са Снапдрагон 855 то Користио сам на прошлогодишњој сесији бенцхмаркинга. Тај графикон можете пронаћи испод, испред резултата бенчмарка.

Резултати теста Куалцомм Снапдрагон 888

Спецификације уређаја за тестирање

Преглед референтних вредности

Са инпутима из Марио Серраферо

• АнТуТу: Ово је холистички стандард. АнТуТу тестира перформансе ЦПУ-а, ГПУ-а и меморије, укључујући и апстрактне тестове и, у последње време, повезане симулације корисничког искуства (на пример, субтест који укључује померање кроз а ЛистВиев). Коначна оцена је пондерисана у складу са разматрањима дизајнера.
• ГеекБенцх: ЦПУ-центричан тест који користи неколико рачунарских оптерећења укључујући шифровање, компресију (текст и слике), рендеровање, симулације физике, компјутерски вид, праћење зрака, препознавање говора и конволуциони закључак неуронске мреже на сликама. Анализа резултата даје специфичне метрике. Коначни резултат је пондерисан у складу са разматрањима дизајнера, стављајући велики нагласак на целобројне перформансе (65%), затим на перформансе са плутањем (30%) и на крају на крипто (5%).
• ГФКСБенцх: Циљ је да симулира графику видео игрица користећи најновије АПИ-је. Много ефеката на екрану и висококвалитетних текстура. Новији тестови користе Вулкан, док застарели тестови користе ОпенГЛ ЕС 3.1. Излази су оквири током теста и фрејмова у секунди (други број подељен са дужином теста, у суштини), уместо пондерисаног резултат.
  • Азтец Руинс: Ови тестови су рачунарски најтежи тестови које нуди ГФКСБенцх. Тренутно, врхунски мобилни чипсетови не могу да издрже 30 кадрова у секунди. Конкретно, тест нуди заиста високу геометрију полигона, хардверску теселацију, текстуре високе резолуције, глобално осветљење и обиље мапирања сенки, обилни ефекти честица, као и цветање и дубина поља ефекти. Већина ових техника ће нагласити могућности процесора за рачунање схадера.
  • Манхаттан ЕС 3.0/3.1: Овај тест остаје релевантан с обзиром да су модерне игре већ достигле предложену графичку верност и имплементирају исте врсте техника. Има сложену геометрију која користи вишеструке циљеве рендеровања, рефлексије (кубичне мапе), мрежно приказивање, многе одложене изворе осветљења, као и цветање и дубину поља у пролазу за накнадну обраду.
• МЛПерф Мобиле: МЛПерф Мобиле је бенцхмарк отвореног кода за тестирање перформанси мобилне вештачке интелигенције. Било је креирао МЛЦоммонс, непрофитни, отворени инжењерски конзорцијум, да „пружи транспарентност и једнаке услове за поређење МЛ система, софтвера и решења." Прва итерација МЛПерф Мобиле-а пружа референтну вредност за закључивање и перформансе за прегршт компјутерског вида и природног језика задатака обраде. За више информација погледајте рад "МЛПерф Мобиле Инференце Бенцхмарк: Зашто је мобилно АИ бенцхмаркинг тешко и шта учинити у вези с тим."
  • Класификација слика: Овај тест укључује закључивање ознаке која се примењује на улазну слику. Типични случајеви употребе укључују претрагу фотографија или екстракцију текста. Референтни модел који се користи је МобилеНетЕдгеТПУ са 4М параметрима, скуп података је ИмагеНет 2012 (224к224), а циљ квалитета је 98% ФП32 (76,19% Топ-1).
  • Сегментација слике: Овај тест укључује партиционисање улазне слике на означене објекте. Типични случајеви употребе укључују самовожњу или даљинско испитивање. Референтни модел који се користи је ДеепЛаб в3+ са 2М параметрима, скуп података је АДЕ20К (512к512), а циљ квалитета је 93% ФП32 (0,244 мАП).
  • Откривање објеката: Овај тест укључује цртање граничних оквира око објеката као и обезбеђивање ознаке за те објекте. Типични случајеви употребе укључују унос камере, на пример за откривање опасности или анализу саобраћаја током вожње. Референтни модел је ССД-МобилеНет в2 са 17М параметара, скуп података је ЦОЦО 2017 (300к300), а циљ квалитета је 97% ФП32 (54,8% мИоУ).
  • Обрада језика: Овај тест подразумева колоквијално одговарање на питања. Типични случајеви употребе укључују интернет претраживаче. Референтни модел је МобилеБЕРТ са 25М параметара, скуп података је мини Скуад (Станфорд Куестион Ансверинг Датасет) в1.1 дев, а циљ квалитета је 93% ФП32 (93,98% Ф1).

АнТуТу резултати

Почевши од АнТуТу-а, можемо видети да је референтни уређај Куалцомм Снапдрагон 888 постигао скоро 17.000 поена виши од Снапдрагон 865 референтног уређаја и скоро 350.000 поена виши од Снапдрагон 855 Пикел-а 4. Када погледате ЦПУ, ГПУ, Меморију и УКС подрезултате (нису приказани овде), можемо видети да највећа побољшања у перформансама долазе од ГПУ-а и меморије. Снапдрагон 888 КРД постигао је приближно 45,56% више у АнТуТу ГПУ подтесту у поређењу са Снапдрагон 865 КРД. Слично томе, Снапдрагон 888 КРД је постигао око 52,08% више у АнТуТу-овом подтесту меморије у поређењу са Снапдрагон 865 КРД. У поређењу са Пикел-ом 4 који покреће Снапдрагон 855, 888 КРД га је надмашио у подтестовима ГПУ-а и меморије за 98,42%, односно 117,58%.

У међувремену, Снапдрагон 888 КРД је постигао приближно 30,05% и 90,28% више у АнТуТу ЦПУ субтесту у поређењу са Снапдрагон 865 КРД и Снапдрагон 855 Пикел 4, респективно. УКС подрезултат је тешко упоредити због различитих верзија Андроид ОС-а на којима је сваки уређај радио (Пикел 4 и Снапдрагон 865 КРД су користили Андроид 10 када сам их тестирао прошле године, док 888 КРД користи Андроид 11.)

Велико повећање перформанси меморије је прилично занимљиво. И 865 КРД и 888 КРД имају 12 ГБ ЛПДДР5 РАМ-а, иако не знамо на који радни такт РАМ меморије. Значајно је да 865 подржава до 16 ГБ ЛПДДР5 РАМ-а на 2750 МХз, док 888 подржава до 16 ГБ ЛПДДР5 РАМ-а на 3200 МХз. Неравнине у ЦПУ-у и ГПУ-у перформансе су мало изнад наших очекивања, пошто је Куалцомм рекао да су добици ЦПУ-а и ГПУ-а Снапдрагон 888 25% и 35% респективно година на годину. Ипак, више референтних вредности за ЦПУ и ГПУ које следе показују добитке који су више у складу са нашим очекивањима.

Геекбенцх Ресултс

У Геекбенцх 5.0, Куалцомм Снапдрагон 888 ради 22,17% и 9,97% више у тестовима са једним и више језгара у поређењу са Снапдрагон 865. У поређењу са Снапдрагон 855, 888 ради око 89,17% и 51,82% боље.

Куалцомм каже да Снапдрагон 888 пружа 25% повећање перформанси ЦПУ-а у односу на Снапдрагон 865. Усамљено језгро ЦПУ-а АРМ Цортек-Кс1 Приме ради на конзервативних 2,84 ГХз - исту брзину као и АРМ последње генерације Цортек-А77 Приме језгро — тако да је могуће да ћемо видети брзину такта од 3+ГХз за неизбежни Снапдрагон 888 „Плус“ средином године Освјежи. Ако је то случај, можемо очекивати да ће се перформансе ЦПУ-а још више побољшати, иако је сада поштено рећи да су добици солидни, али само инкрементални.

Стога, ако вршите надоградњу са две године старог водећег модела, 888 би требало да донесе велика побољшања у перформансама процесора. Ако вршите надоградњу са водећег модела старог годину дана, ти добици су много мањи. Лично сам узбуђен што видим како Снапдрагон 888 уређај управља емулацијом конзоле.

ГФКСБенцх Ресултс

Куалцомм није открио број језгара или максималну фреквенцију Адрено 660 ГПУ-а у Снапдрагон 888, тако да имамо мало тога да кажемо о ГПУ-у осим његових добитака у перформансама. У ГФКСБенцх-овом тесту на Менхетну, који користи ОпенГЛ ЕС 3.0 АПИ и приказује сцену од 1080п ван екрана, Снапдрагон 888 је имао просечна брзина кадрова у секунди од 169 кадрова у секунди, око 34,13% и 83,7% већа од брзине коју су постигли Снапдрагон 865 и 855 редом. У ГФКСБенцх-овом тесту Азтец Руинс, који користи Вулкан графички АПИ и приказује сцену од 1080п ван екрана, Снапдрагон 888 је имао просечна брзина кадрова у секунди од 86 кадрова у секунди, око 38,71% и 95,45% већа од брзине коју су постигли Снапдрагон 865 и 855 редом.

Нема много игара које захтевају много ГПУ коњских снага ( недавни Генсхин Импацт је један изузетак), али побољшане перформансе ГПУ-а су корисне за више од играња игара. Али, играње је дефинитивно највећи разлог зашто ће људима бити стало до ових референтних резултата и Снапдрагон 888 дефинитивно пружа 35% брже графичко приказивање и 20% бољу енергетску ефикасност година на годину. Међутим, ови резултати само показују врхунске перформансе ГПУ-а, тако да ћемо морати да се вратимо ГФКСБенцх — када се докопамо комерцијалног хардвера — да бисмо дугорочним тестови перформанси.

МЛПерф Ресултс

Можда су најзанимљивији добици у перформансама АИ. Куалцомм генерално прави огромне скокове у перформансама АИ сваке године, али овогодишњи добици су најупечатљивији. АИ мотор Снапдрагона 888 има 26 ТОПС перформанси, повећање од 15 ТОПС перформанси Снапдрагона 865 и 7 ТОПС перформанси Снапдрагона 855. Куалцомм приписује велики део овог добитка новој фузионисаној АИ акцелераторској архитектури Хекагон 780 ДСП, спајајући скаларни, векторски и тензорски акцелератори за елиминисање физичких удаљености и меморије за дељење и премештање података ефикасно.

Међутим, тешко нам је да покажемо колико је значајан овај скок у перформансама. Детаљно смо разговарали о тешкоћама бенчмаркинга АИ током наших интервјуа са Куалцомм-ов Травис Ланиер, Гари Бротман и Зиад Асгхар. Добра вест је да је, од наших разговора са руководиоцима компаније Куалцомм, дошло до значајног напретка у области АИ мерила.

На почетку овог чланка споменули смо да је Куалцомм покренуо 4 различита АИ бенцхмарк-а на Снапдрагон 888 референтном уређају: АИМарк, АИТуТу, МЛПерф и УЛ-ов Процион. Можда најперспективнији од ових стандарда је МЛПерф Мобиле, који ће ускоро бити објављен, опен-соурце мобиле АИ бенцхмарк подржан од стране више произвођача СоЦ-а, провајдера МЛ фрамеворк-а и модела произвођачи. Његова почетна серија резултата мобилног закључивања је јавна, па смо те резултате искористили да упоредимо са Снапдрагоном 888. Резултати покривају само 3 уређаја: Ксиаоми Редми 10Кс 5Г који покреће МедиаТек Дименсити 820, АСУС РОГ Пхоне 3 који покреће Куалцомм Снапдрагон 865+ и Самсунг Галаки Ноте 20 који покреће Екинос 990 Ултра 5Г. Куалцомм није пружио резултате кашњења – само бројке пропусности – тако да нисмо исцртали пуне резултате као поднели продавци за верификацију од стране МЛЦоммонс.

У овим одабраним тестовима за закључивање рачунарског вида и обраде природног језика, можемо видети да је референтни уређај Куалцомм Снапдрагон 888 постигао највише резултате у сва четири теста. Од 3 претходна генерација чипсета, МедиаТеков Дименсити 820 је надмашио Снапдрагон 865+ и Екинос 990 у детекцији објеката, док је Екинос 990 надмашио Снапдрагон 865+ и Дименсити 820 у НЛП. Куалцоммов Снапдрагон 865+ је генерално био конкурентан, постигао је једнак резултат са Дименсити 820 у сегментацији слике и надмашио га у НЛП-у. У овим специфичним тестовима закључивања са овим специфичним моделима и скуповима података, Снапдрагон 888 је надмашио 3 чипсета последње генерације.

Биће занимљиво видети које апликације и функције програмери и ОЕМ-ови могу да креирају користећи АИ снагу Снапдрагона 888. Компјутерски вид ће играти посебно важну улогу у многим видеографским функцијама побољшаним вештачком интелигенцијом вероватно видети 2021. године, док побољшане перформансе НЛП-а могу такође утицати на суседне аспекте видеа као што је аудио снимање.

Треба напоменути, међутим, да су резултати Снапдрагона 888 јесу непроверено од стране МЛЦоммонс пошто део процеса верификације организације захтева да уређај буде комерцијално доступни (Куалцомм-ови референтни уређаји се не продају преко оператера или као откључани телефон). Штавише, перформансе зависе од тога који су модели МЛ-а, нумерички формати и МЛ оквири изабрани, као и који су доступни МЛ акцелератори.

Закључак

Куалцомм-ов Снапдрагон 888 још једном доноси инкрементална побољшања перформанси ЦПУ-а и ГПУ-а, али огромна побољшања обраде слика и АИ. Мало људи који врше надоградњу са уређаја старог две године приметиће побољшања у ЦПУ и ГПУ (осим ако не планирају да раде емулатори или играње игрица као што је Генсхин Импацт), али ће сигурно приметити друга побољшања која су направљена на мобилним уређајима технологије. Уређаји имају дисплеје са већом брзином освежавања, више камера са сензорима слике веће резолуције, подршку за 5Г повезивање и још много тога ових дана. Огроман напредак у АИ перформансама ће проћи непримећен од стране просечног корисника, али могућности које су се отвориле са Куалцомм-овим новим чипсетом су узбудљиве за размишљање. Побољшања АИ видео у реалном времену, стримови са више камера и још много тога су на хоризонту следеће године, и компаније попут Гоогле-а настављају да изненађују са функцијама које објављују уз помоћ машинског учења за обуку модели.

Међутим, Куалцомм није једина компанија која побољшава своју линију СоЦ-а. Речено је да ће Самсунгов предстојећи Екинос 2100 за Галаки С21 донети велика побољшања перформанси. Ту су и нови Хуавеи-јев ХиСилицон Кирин 9000 и МедиаТек-ова растућа линија мобилних СоЦ-ова Дименсити. Надам се да ћу поново посетити ова мерила када будемо имали барем један врхунски уређај са Самсунг-овим, Хуавејевим и МедиаТек-овим наредним генерацијама силицијум.

Куалцомм Снапдрагон 888 Бенцхмаркинг Демо

Споменуо сам на почетку овог чланка да је Куалцомм поделио унапред снимљени видео са нама. Ако сте заинтересовани, поставио сам тај видео на Јутјуб. Приказује Снапдрагон 888 који ради све референтне вредности које сам поделио изнад, као и преостале АИ бенцхмаркове које нисам приказао.

У међувремену, ево табеле коју нам је Куалцомм пружио и која сумира резултате теста Снапдрагон 888: