AnTuTu เผยแพร่เกณฑ์มาตรฐานเพื่อทดสอบประสิทธิภาพ AI ของสมาร์ทโฟน

ในช่วงหลายปีที่ผ่านมา บริษัทต่างๆ ให้ความสำคัญกับ AI (ปัญญาประดิษฐ์) มากขึ้นเรื่อยๆ เพื่อสร้างความแตกต่างให้กับผลิตภัณฑ์ของตนจากคู่แข่ง การใช้งาน AI มีตั้งแต่การทำความเข้าใจคำสั่งเสียง การจดจำสถานการณ์ ไปจนถึงการดำเนินการตามคำสั่งโดยตรง ดังนั้นจึงจำเป็นต้องลดความขัดแย้งระหว่างลูกค้าและบริการ เนื่องจากความนิยมอย่างล้นหลาม ปัจจุบัน AI จึงถูกใช้เป็นคำศัพท์ในทางที่ผิดอย่างกว้างขวาง และถึงเวลาแล้วที่จะมีการจัดตั้งระบบการวัดฟังก์ชันนี้ขึ้นมา

AnTuTu ซึ่งเป็นที่รู้จักจากแอปเปรียบเทียบประสิทธิภาพยอดนิยม ได้ดำเนินการเพื่อสร้างมาตรฐานเชิงปริมาณสำหรับทุกคนในการตัดสินความแตกต่างในประสิทธิภาพ AI ของแพลตฟอร์มต่างๆ เพื่อวางรากฐานสำหรับจุดประสงค์นี้ AnTuTu ได้ทำงานร่วมกับผู้ผลิตชิปเพื่อเปิดตัวแอปเปรียบเทียบที่เรียกว่า "AI Review" ซึ่งมุ่งเน้นไปที่การวัดประสิทธิภาพ AI ของสมาร์ทโฟน

ดาวน์โหลดเกณฑ์มาตรฐานการตรวจสอบ AI ของ AnTuTu

โพสต์ในบล็อกของ AnTuTu สำหรับ AI Review เริ่มต้นด้วยการชี้ให้เห็นถึงความยากลำบากในการวัดบางสิ่งที่กว้างใหญ่เท่ากับปัญญาประดิษฐ์ ปัจจุบันในส่วนของสมาร์ทโฟน ยังไม่มีมาตรฐานแบบครบวงจรสำหรับ AI ซึ่งในทางกลับกัน ได้นำไปสู่สถานการณ์ที่ผู้ผลิตชิปทุกรายมีความเข้าใจและการนำไปใช้เป็นของตนเอง AI. Qualcomm จัดการการทำงานของ AI บางอย่างผ่าน Hexagon DSP; HiSilicon ของ Huawei จัดการผ่าน NPU อิสระ Samsung และ MediaTek ยังจัดการการทำงานของ AI ผ่านชิปเฉพาะที่เรียกว่า NPU และ APU ตามลำดับ สถานการณ์นี้ซับซ้อนยิ่งขึ้นด้วยการทำงานร่วมกันระหว่างฮาร์ดแวร์และซอฟต์แวร์ ซึ่งมีความสำคัญอย่างยิ่งต่อประสิทธิภาพ AI ที่มีประสิทธิภาพ ผู้จำหน่ายแต่ละรายจัดเตรียม SDK ของตนเองสำหรับ AI เช่น Qualcomm มี SNPE, MediaTek มี NeuroPilot, HiSilicon มี HiAI และอื่นๆ

เกณฑ์มาตรฐานการตรวจสอบ AI ของ AnTuTu แบ่งออกเป็นสองหมวดหมู่ย่อย: การจำแนกรูปภาพและการจดจำวัตถุ การทดสอบการจัดประเภทรูปภาพจะตรวจสอบข้อมูลการทดสอบที่ประกอบด้วยรูปภาพ 200 ภาพ และอิงตามระบบประสาท Inception v3 ในขณะที่การทดสอบ Object Recognition จะตรวจสอบวิดีโอ 600 เฟรมและอิงตามโครงข่ายประสาท MobileNet SSD เครือข่าย จากนั้นโครงข่ายประสาทเทียมเหล่านี้จะถูกแปลเป็นโครงข่ายประสาทเทียมที่ผู้ผลิตสนับสนุนผ่าน SDK ที่ผู้จำหน่ายจัดเตรียมให้ หากชิปไม่รองรับอัลกอริธึมที่เกี่ยวข้องกับ AI แอปเบนช์มาร์กจะใช้ TFLite ในเบนช์มาร์ก ผลลัพธ์ที่ AnTuTu เตือนเองว่าไม่น่าพอใจและไม่น่าเชื่อถือ

การให้คะแนนเกณฑ์มาตรฐานเกี่ยวข้องโดยตรงกับทั้งความเร็วและความแม่นยำ หากความแม่นยำถูกแลกกับความเร็ว AnTuTu จะกำหนดบทลงโทษให้กับคะแนน สิ่งนี้จะกีดกันการโกงเกณฑ์มาตรฐาน AI ที่ต้องอาศัยเพียงการให้ผลลัพธ์ที่รวดเร็ว แต่ผิดพลาด

AnTuTu ยังได้วางข้อสังเกตพิเศษบางประการสำหรับการใช้งานแอปของตนด้วย แพลตฟอร์มที่ใช้โปรเซสเซอร์ AI เดียวกันไม่น่าจะมีช่องว่างของคะแนนมาก เนื่องจากเกณฑ์มาตรฐานไม่ได้เป็นเพียงการทดสอบเท่านั้น ผลงานแต่เน้นไปที่ ประสิทธิภาพของ AI. Samsung ยังไม่ได้เปิดตัว AI SDK และ HiSilicon กำลังใช้ TFLite สำหรับฟังก์ชันบางอย่าง ซึ่งหมายความว่าคะแนนจะต่ำจนกว่าสถานการณ์เหล่านั้นจะดีขึ้น อุปกรณ์เวอร์ชัน Android พื้นฐานจะส่งผลต่อคะแนนเช่นกัน เนื่องจาก Google เองได้ปรับการรองรับ AI ในระดับระบบให้เหมาะสมที่สุด

แม้จะมาจากบล็อกโพสต์ของ AnTuTu ก็ชัดเจนว่าเป้าหมายนั้น วัด ประสิทธิภาพที่ใช้ AI อาจไม่สามารถทำได้เพียงแค่ลดขนาดลงเหลือเพียงตัวเลขเท่านั้น มีตัวแปรมากมายที่เกี่ยวข้องกับการคำนวณด้วย AI ซึ่งเป็นการเพิ่มความซับซ้อนอีกชั้นหนึ่งให้กับการโต้ตอบที่ซับซ้อนอยู่แล้วระหว่างโซลูชันฮาร์ดแวร์และซอฟต์แวร์ต่างๆ คะแนนตัวเลขเอกพจน์ที่มาจากกิจกรรมการเปรียบเทียบจะไม่ยุติธรรมกับความแตกต่างที่เกี่ยวข้องกับโลกของ AI ดังนั้น แม้ว่าคุณอาจดูคะแนนของคุณและรู้สึกภาคภูมิใจในด้านการเงิน แต่โปรดทราบว่าเรายังอยู่ในช่วงเริ่มต้นของ AI และยิ่งไปกว่านั้นคือ ของการเปรียบเทียบ AI

หากคุณต้องการอ่านเพิ่มเติมเกี่ยวกับ AI การเปรียบเทียบ AI และความท้าทายที่เกี่ยวข้อง โปรดดูบทสัมภาษณ์ของเรากับ Qualcomm ทราวิส ลาเนียร์ และ แกรี่ บรอทแมน และซิอัด อัสการ์.

ที่มา: AnTuTu