AnTuTu, разработчик популярного приложения для сравнительного анализа, выпустил тест для тестирования и измерения производительности смартфонов с использованием искусственного интеллекта. Читай дальше!
В последние годы все больше и больше компаний сосредотачивают внимание на искусственном интеллекте (ИИ) как средстве отличия своего продукта от конкурентов. Использование ИИ варьируется от понимания голосовых команд до распознавания сценариев и выполнения прямых заказов, что делает необходимым уменьшить трение между клиентом и услугой. Из-за растущей популярности ИИ в настоящее время широко используется как модное слово, и пришло время создать некую систему измерения этой функциональности.
AnTuTu, известная своим популярным приложением для сравнительного анализа, взяла на себя задачу предоставить каждому измеримый стандарт, позволяющий оценить разницу в производительности ИИ на разных платформах. Чтобы заложить фундамент для этой цели, AnTuTu в сотрудничестве с производителями чипов выпустила приложение для сравнительного анализа под названием «AI Review», которое фокусируется на измерении производительности смартфонов с использованием искусственного интеллекта.
Загрузите тест AI Review от AnTuTu
Сообщение в блоге AnTuTu для AI Review начинается с указания на трудности измерения чего-то столь огромного, как искусственный интеллект. В настоящее время в сегменте смартфонов не существует единого стандарта ИИ, что, в свою очередь, привело к ситуации, когда каждый производитель чипов имеет собственное понимание и реализацию ИИ. Qualcomm выполняет некоторые операции искусственного интеллекта через Hexagon DSP; HiSilicon от Huawei справляется с этим через независимый NPU; Samsung и MediaTek также выполняют операции искусственного интеллекта с помощью специальных чипов, называемых NPU и APU соответственно. Эта ситуация еще больше усложняется синергией между аппаратным и программным обеспечением, которая имеет решающее значение для эффективной работы ИИ. Каждый поставщик предоставляет свой собственный SDK для искусственного интеллекта: у Qualcomm есть SNPE, у MediaTek — NeuroPilot, у HiSilicon — HiAI и так далее.
Тест AnTuTu AI Review разделен на две подкатегории: классификация изображений и распознавание объектов. Тест классификации изображений рассматривает тестовые данные, состоящие из 200 изображений, и основан на нейронной сети Inception v3. сети, а тест распознавания объектов проверяет 600-кадровое видео и основан на нейронном SSD-накопителе MobileNet. сеть. Эти нейронные сети затем преобразуются в нейронную сеть, которая поддерживается производителем через SDK, предоставленный поставщиком. Если чип не поддерживает алгоритмы, связанные с искусственным интеллектом, приложение для тестирования использует TFLite для бенчмаркинга, результаты которого сами AnTuTu предупреждают как неудовлетворительные и ненадежные.
Оценка бенчмарка напрямую связана как со скоростью, так и с точностью. Если точность заменена скоростью, AnTuTu назначает штрафы к результату. Это препятствовало бы мошенничеству в тестах ИИ, которое основывалось бы на простом предоставлении быстрых, но неверных результатов.
AnTuTu также высказал несколько особых замечаний по использованию своего приложения. Платформы, использующие один и тот же процессор искусственного интеллекта, вряд ли будут иметь большие различия в баллах, поскольку тест не просто проверяет производительность, но фокусируется на AI-производительность. Samsung еще не выпустила свой AI SDK, а HiSilicon использует TFLite для определенных функций, а это означает, что их оценки будут низкими, пока ситуация не улучшится. Базовая версия Android устройства также повлияет на оценку, поскольку сама Google оптимизирует поддержку искусственного интеллекта на системном уровне.
Даже из собственного сообщения в блоге AnTuTu становится ясно, что цель мера Производительность на основе искусственного интеллекта может оказаться невозможной, если просто свести ее к числу. В вычислениях на основе ИИ задействовано множество переменных, что добавляет еще один уровень сложности к и без того сложному взаимодействию между различными аппаратными и программными решениями. Единственная цифровая оценка, полученная в результате сравнительного анализа, не будет отражать нюансы, связанные с миром ИИ. Поэтому, хотя вы можете посмотреть на свой результат и почувствовать некоторую гордость в денежном выражении, знайте, что мы все еще находимся на относительно ранних стадиях развития ИИ и, тем более, сравнительного анализа ИИ.
Если вы хотите узнать больше об искусственном интеллекте, его сравнительном анализе и связанных с этим проблемах, прочтите наше интервью с представителем Qualcomm. Трэвис Ланье и Гэри Бротман и Зиад Асгар.
Источник: АнТуТу