Сравнительный анализ Qualcomm Snapdragon 8 Gen 1: ожидаемая производительность от флагманов 2022 года

Буквально на прошлой неделе появилось новое Qualcomm Snapdragon 8 1-го поколения на технологическом саммите компании на Гавайях. Последний набор микросхем Qualcomm включает в себя целый ряд значительных улучшений по всем направлениям, что делает его одним из самых интересных устройств Qualcomm за долгое время. Хотя компания не решалась предоставить подробную техническую информацию по некоторым аспектам (включая игнорирование не говоря уже о названии версии Adreno или Kryo), мы по-прежнему могли запускать целый ряд популярных тестов на Эталонное устройство Snapdragon 8 Gen 1. Эти тесты помогают установить базовые ожидания производительности для будущих флагманов в 2022 году, давая нам еще одну вещь, на которую стоит рассчитывать в следующем году.

На эталонном устройстве Snapdragon 8 Gen 1 мы провели один комплексный тест (AnTuTu), тест, ориентированный на процессор (Geekbench), тест, ориентированный на графический процессор (GFXBench), и тесты MLPerf. Каждый тест запускался три раза, и мы брали среднее значение трех результатов. Qualcomm по умолчанию включила параметр «UI Perf Mode», который мы отключили, поскольку он эффективно пытается принудительно приложения для бенчмаркинга для работы на ядрах Prime, чтобы получить немного более высокий балл в определенных ориентиры. Стоит также отметить, что как только мы получим коммерческое устройство с Qualcomm Snapdragon 8 Gen 1, мы будем повторно запускать эти тесты.

Если вам интересно ознакомиться со всеми характеристиками и функциями мобильного телефона Qualcomm Snapdragon 8 Gen 1 платформу, которую компания сделала доступной до сих пор, тогда я рекомендую прочитать наше объяснение о Qualcomm Snapdragon 8 Ген 1. Для справки я составил диаграмму, сравнивающую основные характеристики Qualcomm Snapdragon. 8 Эталонное устройство Gen 1 по сравнению с двумя другими эталонными устройствами, использованными в этом сравнительном тесте. Вы можете найти этот график ниже перед результатами тестов.

Qualcomm предоставила нам набор ожидаемых результатов тестов, основанных на их собственном тестировании. Мы использовали это только для справки, и в нижней части этой статьи доступна таблица, содержащая результаты тестов, которые Qualcomm ожидала от эталонного устройства.

Об этой статье: Qualcomm спонсировала моего коллегу, Рич Вудс, чтобы принять участие в саммите Snapdragon Tech Summit в Коне, Гавайи. Компания оплатила ему перелет и гостиницу. Однако у Qualcomm не было никаких комментариев относительно содержания этой статьи.

Результаты тестов Qualcomm Snapdragon 8 Gen 1

Технические характеристики тестового устройства

Обзор тестов. Нажмите, чтобы развернуть.

Обзор тестов

• АнТуТу: это целостный эталон. AnTuTu тестирует производительность процессора, графического процессора и памяти, включая как абстрактные тесты, так и, в последнее время, соответствующие симуляции взаимодействия с пользователем (например, подтест, который включает в себя прокрутку Посмотреть список). Окончательная оценка взвешивается в соответствии с соображениями дизайнера.
• GeekBench: тест, ориентированный на ЦП, который использует несколько вычислительных рабочих нагрузок, включая шифрование, сжатие (текст и изображения), рендеринг, моделирование физики, компьютерное зрение, трассировка лучей, распознавание речи и вывод сверточных нейронных сетей на изображениях. Разбивка баллов дает конкретные показатели. Окончательная оценка взвешивается в соответствии с соображениями разработчика, уделяя большое внимание целочисленной производительности (65%), затем производительности с плавающей запятой (30%) и, наконец, криптографии (5%).
• GFXBench: предназначен для имитации рендеринга графики видеоигр с использованием новейших API. Множество экранных эффектов и качественные текстуры. В более новых тестах используется Vulkan, в то время как в устаревших тестах используется OpenGL ES 3.1. Выходные данные — кадры во время теста и кадров в секунду (по существу, другое число, деленное на длину теста), вместо взвешенного счет.
  • Руины ацтеков: эти тесты являются наиболее ресурсоемкими из предлагаемых GFXBench. В настоящее время топовые мобильные чипсеты не могут поддерживать 30 кадров в секунду. В частности, тест предлагает геометрию с большим количеством полигонов, аппаратную тесселяцию, текстуры высокого разрешения, глобальное освещение и множество карт теней, обильные эффекты частиц, а также цветение и глубина резкости последствия. Большинство этих методов нагружают вычислительные возможности шейдеров процессора.
  • Манхэттен ЭС 3.0/3.1: этот тест остается актуальным, учитывая, что современные игры уже достигли предполагаемой графической точности и реализуют те же методы. Он имеет сложную геометрию с использованием нескольких целей рендеринга, отражений (кубических карт), рендеринга сетки, множества отложенных источников освещения, а также цветения и глубины резкости в проходе постобработки.
• МЛПерф Мобильный: MLPerf Mobile — это тест с открытым исходным кодом для тестирования производительности мобильного ИИ. Это было создано MLCommons, некоммерческий открытый инженерный консорциум, чтобы «обеспечить прозрачность и равные условия для сравнения систем машинного обучения, программного обеспечения и решения». Первая итерация MLPerf Mobile обеспечивает эталон производительности логического вывода для нескольких систем компьютерного зрения и естественного языка. задачи обработки. Для получения дополнительной информации обратитесь к статье «MLPerf Mobile Inference Benchmark: почему сложно проводить бенчмаркинг мобильного ИИ и что с этим делать.”
  • Классификация изображений: Этот тест включает определение метки, которую следует применить к входному изображению. Типичные варианты использования включают поиск фотографий или извлечение текста. Используемая эталонная модель — MobileNetEdgeTPU с параметрами 4M, набор данных — ImageNet 2012 (224×224), целевое качество — 98 % от FP32 (76,19 % Top-1).
  • Сегментация изображения: Этот тест включает в себя разбиение входного изображения на помеченные объекты. Типичные варианты использования включают автономное вождение или дистанционное зондирование. Используемая эталонная модель — DeepLab v3+ с параметрами 2M, набор данных — ADE20K (512×512), целевое качество — 93% от FP32 (0,244 мАд).
  • Обнаружение объекта: Этот тест включает в себя рисование ограничивающих рамок вокруг объектов, а также предоставление метки для этих объектов. Типичные варианты использования включают ввод данных с камеры, например, для обнаружения опасностей или анализа дорожного движения во время вождения. Эталонная модель — SSD-MobileNet v2 с параметрами 17M, набор данных — COCO 2017 (300 × 300), а целевое качество — 97 % от FP32 (54,8 % mIoU).
  • Языковая обработка: Этот тест включает в себя ответы на вопросы в разговорной речи. Типичные варианты использования включают поисковые системы в Интернете. Эталонная модель — MobileBERT с 25 млн параметров, набор данных — mini Squad (Стэнфордский набор данных для ответов на вопросы) v1.1 dev, а целевое качество — 93 % от FP32 (93,98 % F1).

читать далее

---

Сравнительные результаты

АнТуТу

Начав с AnTuTu, мы видим, что эталонное устройство Qualcomm Snapdragon 8 Gen 1 набрало значительно выше, чем в предыдущие годы, со значительным увеличением в годовом исчислении примерно на 240 000 человек. точки. Это довольно серьезное улучшение примерно на 33%, что намного выше обещаний Qualcomm о повышении скорости на 20%. Это всего лишь один тест, но AnTuTu — отличный инструмент для сравнения необработанных вычислительных возможностей устройств, даже если не все из них применимы к реальному использованию.

Geekbench

Однако в Geekbench 5.0 все совсем по-другому. Snapdragon 8 Gen 1 демонстрирует практически никакой прирост по сравнению с эталонным устройством Snapdragon 888 по сравнению с прошлым, и фактически даже регрессирует в производительности, когда речь идет о многоядерных процессорах. Это не значит, что мы получили рванину — Qualcomm предоставила нам информационную страницу с результатами тестов, которые можно ожидать от Snapdragon 8 Gen 1, и они соответствуют тому, что следует ожидать. На самом деле, одноядерная производительность была выше, чем верхние границы, которые предоставила нам Qualcomm, тогда как многоядерная производительность была на 20 пунктов ниже нижней границы того, что можно было ожидать.

Сказав это, я думаю, ясно, что каким бы ни был тест, это не тестирование, в котором Qualcomm внесла улучшения. Другие наши тесты показывают значительные улучшения по сравнению с чипсетами предыдущих лет.

GFXBench

Qualcomm мало что рассказала о новом графическом процессоре Adreno в Snapdragon 8 Gen 1, поэтому нам нечего сказать о графическом процессоре, кроме повышения его производительности. Мы не знаем ни количества ядер, ни частоты, и у нас даже нет номера версии. В тесте GFXBench Manhattan, который использует API OpenGL ES 3.0 и отображает сцену 1080p за кадром, Snapdragon 8 Gen 1 показал средняя частота кадров 221 кадр/с, что примерно на 31% и 75% выше, чем у Snapdragon 888 и 865. соответственно. В тесте GFXBench Aztec Ruins, который использует графический API Vulkan и отображает сцену 1080p за кадром, Snapdragon 8 Gen 1 показал среднюю частоту кадров 41 кадр/с. Однако есть предостережение; предыдущие результаты на эталонных устройствах были протестированы в 1080p, тогда как единственный тест Aztec Ruins, к которому у нас был доступ, был в 1440p. Увеличение до 1080p требует рендеринга на 43,75% больше пикселей за раз, поэтому производительность в этом тесте снизилась.

Лишь некоторые из самых лучшие игры для андроид требуют большой мощности графического процессора, но улучшенная производительность графического процессора полезна не только для игр. Сказав это, игры, безусловно, являются самой большой причиной, по которой людям будут интересны эти результаты тестов, и Snapdragon 8 Gen 1, похоже, обеспечивает ускорение графического рендеринга на 35% и повышение энергоэффективности на 20% в годовом исчислении. год. Однако эти результаты демонстрируют только пиковую производительность графического процессора, поэтому нам придется вернуться к GFXBench — как только мы получим коммерческое оборудование — для того, чтобы запустить долгосрочную производительность теста тесты.

MLPerf

Qualcomm особенно осторожно относится к специфике, когда речь идет об улучшениях искусственного интеллекта. У нас нет данных о TOPS (триллион операций в секунду), хотя у нас есть информация о других улучшениях. Например, есть третье поколение сенсорного концентратора компании, и он также продемонстрировал ряд других особенностей SoC на Гавайях.

Однако нам трудно продемонстрировать, насколько значительным на самом деле является этот скачок в производительности. Мы подробно говорили о трудностях бенчмаркинга ИИ во время наших интервью с Трэвис Ланье из Qualcomm, Гэри Бротман и Зиад Асгар. Хорошей новостью является то, что после наших обсуждений с руководителями Qualcomm были достигнуты значительные успехи в области тестов искусственного интеллекта.

Наиболее многообещающие тесты, доступные в настоящее время, представляют собой MLPerf Mobile. эталонный тест мобильного ИИ с открытым исходным кодом, поддерживаемый несколькими поставщиками SoC, поставщиками платформ машинного обучения и моделью производители. Его первая партия результатов мобильного логического вывода является общедоступным, поэтому мы использовали эти результаты для сравнения Snapdragon 8 Gen 1 со Snapdragon 888 в Xiaomi Mix 4, Dimensity 1100 в Vivo S9 5G и Exynos 2100 в Samsung Galaxy S21 Plus. Мы не получили результатов задержки — только показатели пропускной способности — поэтому мы не отображали полные результаты, представленные поставщиками для проверки MLCommons.

В этих избранных тестах компьютерного зрения и обработки естественного языка мы можем видеть что эталонное устройство Qualcomm Snapdragon 8 Gen 1 набрало самые высокие баллы во всех четырех тестах далеко. В целом Demensity 1100 показал себя довольно плохо. Snapdragon 888 от Qualcomm по-прежнему уверенно побеждает в этом тесте, но Snapdragon 8 Gen 1 находится на другом уровне во всех этих тестах.

Будет интересно посмотреть, какие приложения и функции смогут создать разработчики и OEM-производители, используя искусственный интеллект Snapdragon 8 Gen 1. Компьютерное зрение будет играть особенно важную роль во многих функциях видеосъемки, улучшенных искусственным интеллектом. скорее всего, увидим в 2022 году, в то время как улучшенная производительность NLP может также повлиять на смежные с видео аспекты, такие как звук. запись. Такие компании, как Google, работают над Гугл тензор также подтолкнет других поставщиков SoC в этом отделе.

Заключение

Таблица, которую Qualcomm предоставила нам с ожидаемыми результатами тестов, приведена ниже, и вы можете видеть, что она в основном соответствует результатам, которые мы получили выше.

Ожидаемые результаты тестов для эталонного дизайна Snapdragon 8 Gen 1 (от Qualcomm)

Ориентир	Версия	Метод	Ожидаемый диапазон баллов
Система	Geekbench ST	v5.4.2	Среднее из 3 итераций	~1220 - 1233
Система	Geekbench МТ	v5.4.2	Среднее из 3 итераций	~3770 - 3810
Система	АнТуТу	v9.2.1	Среднее из 3 итераций	1-й запуск: ~1 мВ среднем из 3 итераций: ~980 тыс.
Система	PCMark	v3.0.4061	Среднее из 3 итераций	~17к
Браузер (Chrome v95.0.4638.74, 64-разрядная версия)	ДжетСтрим	v2.0	Среднее из 3 итераций	~135 - 140
Браузер	Спидометр	v2.0	Среднее из 3 итераций	~123 - 126
Браузер	WebXPRT	v3.0	Среднее из 3 итераций	~194 - 197
ИИ	АИТуТу	v2.0	Среднее из 3 итераций	~2,550,000 - 2,600,000
ИИ	AIMark	v3.0	Среднее из 3 итераций	~97К
ИИ	MLPerf (на отдельном QRD, так как запуск занимает 30 минут)	v1.1	Среднее из 3 итераций	Класс изображения: ~2435–2450 Обнаружение объектов: ~1180–1250 Сегмент изображения: ~520–540 Понимание языка: ~38 - 40 Класс изображения (офлайн): ~3580 - 3650
ИИ	ЭТН АИБ	v4.0.4	Среднее из 3 итераций	~ 530 - 550 тыс.
Графика	GFXBench Manhattan 3.0 Offscreen (1080p) (FPS)	v5.0	Среднее из 3 итераций	~ 267 - 268 кадров в секунду
Графика	GFXBench T-Rex — За кадром (1080p) (FPS)	v5.0	Среднее из 3 итераций	~ 450 - 452 кадров в секунду
Графика	GFXBench Manhattan 3.1 Offscreen (1080p) (FPS)	v5.0	Среднее из 3 итераций	~ 176 кадров в секунду
Графика	GFXBench Car Chase Offscreen (1080p) ES3.1 (FPS)	v5.0	Среднее из 3 итераций	~ 97 - 98 кадров в секунду
Графика	GFXBench Aztec Ruins Vulkan (High Tier) Offscreen (1440p) (FPS)	v5.0	Среднее из 3 итераций	~49 кадров в секунду
Графика	GFXBench Aztec Ruins OpenGL (High Tier) Offscreen (1440p) (FPS)	v5.0	Среднее из 3 итераций	~43 кадров в секунду

читать далее

Snapdragon 8 Gen 1 предлагает массу улучшений по сравнению с прошлогодним чипсетом, особенно когда речь идет об искусственном интеллекте. Хотя в результатах Geekbench, привязанных к ЦП, определенно есть некоторая странность, ясно, что есть общие улучшения. Если вы обновляете устройство, которое на два года старше (или старше), то улучшения, скорее всего, будут заметны, хотя значительный прирост производительности ИИ, скорее всего, останется незамеченным для большинства. Компании редко используют весь потенциал ИИ, когда речь идет о чипсетах Qualcomm, и вполне вероятно, что и здесь будет то же самое.

Также стоит отметить, что с ростом конкуренции, возможно, стоит подождать, чтобы увидеть, что Samsung и MediaTek сделают дальше. Размерность 9000 Чипсет может конкурировать со Snapdragon 8 Gen 1, когда дело доходит до производительности, и мы пока мало что знаем о предстоящем Exynos 2200. Я лично с нетерпением жду возможности вернуться к этим тестам на коммерческом устройстве в будущем, особенно в более контролируемых условиях.