Η AnTuTu, ο προγραμματιστής πίσω από τη δημοφιλή εφαρμογή συγκριτικής αξιολόγησης, κυκλοφόρησε ένα σημείο αναφοράς για τη δοκιμή και τη μέτρηση της απόδοσης AI των smartphone. Συνέχισε να διαβάζεις!
Τα τελευταία χρόνια όλο και περισσότερες εταιρείες επικεντρώνονται στην τεχνητή νοημοσύνη (AI) ως μέσο για να ξεχωρίσουν το προϊόν τους από τον ανταγωνισμό. Οι χρήσεις της τεχνητής νοημοσύνης κυμαίνονται από την κατανόηση φωνητικών εντολών έως την αναγνώριση σεναρίων έως την εκτέλεση απευθείας εντολών, καθιστώντας έτσι απαραίτητη τη μείωση της τριβής μεταξύ πελάτη και υπηρεσίας. Λόγω της εκρηκτικής δημοτικότητάς του, η τεχνητή νοημοσύνη χρησιμοποιείται πλέον ευρέως ως τσιτάτο και είναι καιρός να δημιουργηθεί κάποιο σύστημα μέτρησης αυτής της λειτουργικότητας.
Το AnTuTu, γνωστό για τη δημοφιλή εφαρμογή συγκριτικής αξιολόγησης του, έχει αναλάβει να παρέχει ένα μετρήσιμο πρότυπο για όλους ώστε να κρίνουν τη διαφορά στην απόδοση τεχνητής νοημοσύνης διαφορετικών πλατφορμών. Για να θέσει τα θεμέλια για αυτόν τον σκοπό, η AnTuTu συνεργάστηκε με κατασκευαστές τσιπ για να κυκλοφορήσει μια εφαρμογή συγκριτικής αξιολόγησης που ονομάζεται "AI Review" που εστιάζει στη μέτρηση της απόδοσης AI των smartphone.
Κατεβάστε το σημείο αναφοράς αξιολόγησης AI του AnTuTu
Η ανάρτηση ιστολογίου του AnTuTu για το AI Review ξεκινά επισημαίνοντας τις δυσκολίες στη μέτρηση κάτι τόσο τεράστιου όπως η Τεχνητή Νοημοσύνη. Επί του παρόντος, στο τμήμα των smartphone, δεν υπάρχει κανένα ενιαίο πρότυπο για την τεχνητή νοημοσύνη, το οποίο με τη σειρά του έχει οδηγήσει σε μια κατάσταση όπου κάθε κατασκευαστής chip έχει τη δική του κατανόηση και εφαρμογή ΟΛΑ ΣΥΜΠΕΡΙΛΑΜΒΑΝΟΝΤΑΙ. Η Qualcomm χειρίζεται ορισμένες λειτουργίες AI μέσω του Hexagon DSP. Το HiSilicon της Huawei το χειρίζεται μέσω μιας ανεξάρτητης NPU. Η Samsung και η MediaTek χειρίζονται επίσης λειτουργίες AI μέσω αποκλειστικών τσιπ που αναφέρονται ως NPU και APU αντίστοιχα. Αυτή η κατάσταση περιπλέκεται περαιτέρω από τη συνέργεια μεταξύ υλικού και λογισμικού, η οποία είναι ζωτικής σημασίας για την αποτελεσματική απόδοση της τεχνητής νοημοσύνης. Κάθε προμηθευτής παρέχει το δικό του SDK για AI -- Η Qualcomm έχει SNPE, η MediaTek έχει NeuroPilot, το HiSilicon έχει HiAI και ούτω καθεξής.
Το σημείο αναφοράς AI Review του AnTuTu χωρίζεται σε δύο υποκατηγορίες: Ταξινόμηση εικόνων και Αναγνώριση αντικειμένων. Η δοκιμή ταξινόμησης εικόνων εξετάζει τα δεδομένα δοκιμής που αποτελούνται από 200 εικόνες και βασίζεται στο νευρωνικό Inception v3 δικτύου, ενώ η δοκιμή αναγνώρισης αντικειμένων εξετάζει ένα βίντεο 600 καρέ και βασίζεται στο νευρωνικό SSD MobileNet δίκτυο. Αυτά τα νευρωνικά δίκτυα μεταφράζονται στη συνέχεια στο νευρωνικό δίκτυο που υποστηρίζεται από τον κατασκευαστή μέσω του SDK που παρέχεται από τον προμηθευτή. Εάν το τσιπ δεν υποστηρίζει αλγόριθμους που σχετίζονται με την τεχνητή νοημοσύνη, η εφαρμογή συγκριτικής αξιολόγησης χρησιμοποιεί το TFLite για τη συγκριτική αξιολόγηση, τα αποτελέσματα του οποίου προειδοποιούν τα ίδια τα AnTuTu ως μη ικανοποιητικά και αναξιόπιστα.
Η βαθμολογία αναφοράς σχετίζεται άμεσα τόσο με την ταχύτητα όσο και με την ακρίβεια. Εάν η ακρίβεια ανταλλάσσεται με την ταχύτητα, το AnTuTu ορίζει ποινές στο σκορ. Αυτό θα αποθάρρυνε την εξαπάτηση βάσει τεχνητής νοημοσύνης που θα βασιζόταν στην απλή παροχή γρήγορων αλλά λανθασμένων αποτελεσμάτων.
Το AnTuTu έχει επίσης θέσει μερικές ειδικές παρατηρήσεις για τη χρήση της εφαρμογής του. Οι πλατφόρμες που χρησιμοποιούν τον ίδιο επεξεργαστή τεχνητής νοημοσύνης είναι απίθανο να έχουν μεγάλα κενά βαθμολογίας, καθώς το σημείο αναφοράς δεν δοκιμάζει απλώς εκτέλεση, αλλά εστιάζει σε AI-επιδόσεις. Η Samsung δεν έχει κυκλοφορήσει ακόμη το AI SDK της και το HiSilicon χρησιμοποιεί το TFLite για ορισμένες λειτουργίες, πράγμα που σημαίνει ότι οι βαθμολογίες τους θα είναι χαμηλές έως ότου βελτιωθούν αυτές οι καταστάσεις. Η βασική έκδοση Android της συσκευής θα έχει επίσης επίδραση στη βαθμολογία, καθώς η ίδια η Google βελτιστοποιεί την υποστήριξη της τεχνητής νοημοσύνης σε επίπεδο συστήματος.
Ακόμη και από την ανάρτηση στο blog του ίδιου του AnTuTu, είναι σαφές ότι ο στόχος να Μετρήστε Η απόδοση που βασίζεται στην τεχνητή νοημοσύνη μπορεί να μην είναι εφικτή απλώς μειώνοντάς την σε έναν αριθμό. Υπάρχουν πολλές μεταβλητές που εμπλέκονται στους υπολογισμούς που βασίζονται σε τεχνητή νοημοσύνη, ο οποίος προσθέτει ένα άλλο επίπεδο πολυπλοκότητας στην ήδη πολύπλοκη αλληλεπίδραση μεταξύ διαφορετικών λύσεων υλικού και λογισμικού. Η μοναδική αριθμητική βαθμολογία που θα προέκυπτε από μια δραστηριότητα συγκριτικής αξιολόγησης δεν θα ανταποκρινόταν στις αποχρώσεις που εμπλέκονται στον κόσμο της τεχνητής νοημοσύνης. Έτσι, ενώ μπορείτε να κοιτάξετε τη βαθμολογία σας και να αισθάνεστε νομισματικά υπερήφανοι, να ξέρετε ότι βρισκόμαστε ακόμα στα σχετικά πρώιμα στάδια της τεχνητής νοημοσύνης, και ακόμη περισσότερο, της συγκριτικής αξιολόγησης της τεχνητής νοημοσύνης.
Αν θέλετε να διαβάσετε περισσότερα για την τεχνητή νοημοσύνη, τη συγκριτική αξιολόγηση της τεχνητής νοημοσύνης και τις σχετικές προκλήσεις, ρίξτε μια ματιά στη συνέντευξή μας με την Qualcomm's Τράβις Λανιέ και Gary Brotman και Ziad Asghar.
Πηγή: AnTuTu