AnTuTu, populārās etalonuzdevumu lietotnes izstrādātājs, ir izlaidis etalonu, lai pārbaudītu un novērtētu viedtālruņu AI veiktspēju. Turpini lasīt!
Pēdējos gados arvien vairāk uzņēmumu ir koncentrējušies uz AI (mākslīgo intelektu) kā līdzekli, lai atšķirtu savu produktu no konkurentiem. AI izmantošanas diapazons ir no balss komandu izpratnes līdz scenāriju atpazīšanai līdz tiešu pasūtījumu izpildei, tādējādi radot nepieciešamību samazināt berzi starp klientu un pakalpojumu. Tā kā mākslīgais intelekts ir strauji populārs, tas tagad tiek plaši ļaunprātīgi izmantots kā modes vārds, un ir pienācis laiks izveidot kādu šīs funkcionalitātes mērīšanas sistēmu.
AnTuTu, kas pazīstams ar savu populāro etalonuzdevumu lietotni, ir uzņēmies nodrošināt kvantitatīvu standartu, lai ikviens varētu novērtēt atšķirību AI veiktspējā dažādās platformās. Lai šim nolūkam izveidotu pamatakmeņus, AnTuTu ir sadarbojies ar mikroshēmu ražotājiem, lai atbrīvotu salīdzinošās novērtēšanas lietotni ar nosaukumu "AI Review", kas koncentrējas uz viedtālruņu AI veiktspējas mērīšanu.
Lejupielādējiet AnTuTu AI pārskata etalonu
AnTuTu emuāra ieraksts AI Review sākas, norādot uz grūtībām, kas rodas, izmērot kaut ko tik plašu kā mākslīgais intelekts. Pašlaik viedtālruņu segmentā nav vienota AI standarta, kas savukārt ir radījusi situāciju, ka katram mikroshēmu ražotājam ir sava izpratne un ieviešana AI. Qualcomm apstrādā dažas AI darbības, izmantojot Hexagon DSP; Huawei HiSilicon to apstrādā, izmantojot neatkarīgu NPU; Samsung un MediaTek arī veic AI darbības, izmantojot īpašas mikroshēmas, kas attiecīgi tiek sauktas par NPU un APU. Šo situāciju vēl vairāk sarežģī sinerģija starp aparatūru un programmatūru, kas ir ļoti svarīga efektīvai AI veiktspējai. Katrs piegādātājs nodrošina savu AI SDK — Qualcomm ir SNPE, MediaTek ir NeuroPilot, HiSilicon ir HiAI un tā tālāk.
AnTuTu AI pārskata etalons ir sadalīts divās apakškategorijās: attēlu klasifikācija un objektu atpazīšana. Attēlu klasifikācijas testā tiek pārskatīti testa dati, kas sastāv no 200 attēliem, un tas ir balstīts uz Inception v3 neironu. tīklu, savukārt objektu atpazīšanas tests pārbauda 600 kadru video un ir balstīts uz MobileNet SSD neironu tīklu. Šie neironu tīkli pēc tam tiek pārvērsti neironu tīklā, ko atbalsta ražotājs, izmantojot pārdevēja nodrošināto SDK. Ja mikroshēma neatbalsta ar mākslīgo intelektu saistītus algoritmus, etalona lietotne salīdzinošajai novērtēšanai izmanto TFLite, kuras rezultātus paši AnTuTu brīdina kā neapmierinošus un neuzticamus.
Etalona vērtēšana ir tieši saistīta gan ar ātrumu, gan precizitāti. Ja precizitāte tiek izmainīta pret ātrumu, AnTuTu piešķir sodus rezultātam. Tas atturētu no mākslīgā intelekta krāpšanās, kas būtu balstījusies tikai uz ātru, bet nepareizu rezultātu nodrošināšanu.
AnTuTu ir arī izstrādājis dažas īpašas piezīmes par savas lietotnes izmantošanu. Maz ticams, ka platformām, kurās tiek izmantots viens un tas pats AI procesors, būs lielas punktu atšķirības, jo etalons ne tikai pārbauda sniegumu, bet koncentrējas uz AI veiktspēja. Samsung vēl nav izlaidis savu AI SDK, un HiSilicon izmanto TFLite noteiktām funkcijām, kas nozīmē, ka to rādītāji būs zemi, līdz šīs situācijas tiks uzlabotas. Ierīces bāzes Android versija arī ietekmēs rezultātu, jo pati Google ir optimizējusi AI atbalstu sistēmas līmenī.
Pat no paša AnTuTu emuāra ieraksta ir skaidrs, ka mērķis ir mērs Uz AI balstīta veiktspēja var nebūt iespējama, vienkārši samazinot to līdz skaitlim. AI balstītos aprēķinos ir iesaistīti daudzi mainīgie, kas jau tā sarežģītajai mijiedarbībai starp dažādiem aparatūras un programmatūras risinājumiem piešķir vēl vienu sarežģītības pakāpi. Atsevišķs skaitliskais rādītājs, kas tiktu iegūts salīdzinošās darbības rezultātā, neattaisnotu nianses, kas saistītas ar AI pasaulē. Tātad, lai gan jūs, skatoties uz savu rezultātu un naudas izteiksmē, jūtaties lepnums, ziniet, ka mēs joprojām esam salīdzinoši agrīnā AI un vēl jo vairāk AI salīdzināšanas stadijā.
Ja vēlaties uzzināt vairāk par AI, AI salīdzinošo novērtēšanu un ar to saistītajiem izaicinājumiem, skatiet mūsu interviju ar Qualcomm. Treviss Lanjē un Gerijs Brotmens un Ziads Asgars.
Avots: AnTuTu