Huawei se prépare à lancer l'assistant virtuel « HiAssistant » pour le marché chinois, alimenté par sa technologie NLU « HiAI ». La fonctionnalité sera disponible pour les smartphones équipés du SoC Kirn 970 avec le logiciel EMUI 8.1 de Huawei.
Le monde des assistants virtuels est dominé par deux noms: Amazon et Google. Au troisième trimestre 2017, les appareils Amazon Echo et Google Home dominaient avec une part de marché stupéfiante de 92 %, selon Analyse stratégique. Parmi les autres concurrents notables dans ce domaine figurent Samsung avec Assistant Bixby et Apple avec Siri, mais leur pénétration du marché est dérisoire par rapport à Amazon et Google. Même les géants des télécommunications tels que Huawei ont eu du mal à rivaliser dans ce domaine, et Huawei en particulier s'est résigné à se concentrer uniquement sur le marché chinois.
En effet, s'exprimant l'année dernière au Consumer Electronics Show, le PDG de Huawei Technologies Consumer Business Group, Richard Yu, a déclaré Le bord
que l'entreprise n'avait pas l'intention de rechercher un assistant virtuel sur les marchés internationaux.« Aujourd'hui, Amazon et Google sont plus forts que nous; Alexa et Google Assistant sont meilleurs. Comment pouvons-nous être compétitifs ?" - Richard Yu, PDG de Huawei Technologies Consumer Business Group, s'adressant à Le bord
Dans un rapport distinct, des sources s'exprimant sous l'anonymat Bloomberg a déclaré à la publication que Huawei développait son propre assistant vocal pour smartphones, mais uniquement pour le marché chinois. Le rapport contenait peu de détails à l'époque, mais mentionnait que l'assistant vocal serait conçu pour concurrencer Siri, Google Assistant et Amazon Alexa d'Apple.
Depuis l'époque de cette publication, nous n'avons pas entendu plus de détails sur l'assistant de Huawei, cependant, Développeurs XDA a obtenu l'accès aux applications HiAssistant et HiAI de Huawei à partir de fichiers de micrologiciel extraits de la version EMUI 8.1 du Huawei Mate 10 chinois basée sur Android 8.1 Oreo.
Les informations suivantes sont basées sur les fichiers du micrologiciel obtenus par @FunkyHuawei, l'homme derrière le FunkyHuawei.club service, qui permet aux utilisateurs de mise à jour, débloquer, ou changer de marque Téléphones Huawei et Honor payants. Il a fourni l'accès à ces fichiers de firmware exclusivement aux développeurs XDA.
HiAssistant: la réponse de Huawei à Siri, Amazon Alexa et Google Assistant d'Apple
Pour ses smartphones vendus dans la région chinoise, Huawei préinstalle une application appelée « HiVoice ». L'application propose des fonctionnalités très basiques contrôles sur votre smartphone, comme demander où il se trouve et passer un appel téléphonique, il n'est donc pas aussi sophistiqué que d'autres virtuels assistants. Cela semble toutefois changer, à mesure que les travaux de Huawei sur son unité de traitement neuronal (NPU) sur le HiSilicon Kirin 970 va enfin payer. La société vante depuis longtemps les capacités d'IA du SoC, mais à part certaines reconnaissance de scène de base dans l'application caméra EMUI, nous n'avons pas vu les fruits de leur travail.
Dans les dernières versions chinoises du Huawei Mate 10 Pro, l'application HiAssistant de Huawei, optimisée par le Plateforme informatique mobile HiAI, nous donne des indications sur toutes les capacités du prochain assistant virtuel. D'après ce que nous voyons, il semble que la plateforme offrira des fonctionnalités pour concurrencer non seulement Google Assistant et Amazon Alexa, mais aussi Objectif Google et Samsung Bixby.
L'un des principaux objectifs de HiAssistant sera ses capacités de compréhension du langage naturel (NLU). NLU fait référence à la manière dont une machine est capable d'interpréter des phrases non structurées à partir d'une saisie humaine. Alors qu'une personne peut communiquer efficacement avec une autre personne malgré les erreurs de prononciation, les expressions familières et autres bizarreries du discours, une machine nécessite généralement une entrée structurée afin de comprendre l'intention du commande.
La création d'un système NLU efficace résoudra l'une des plus grandes frustrations liées aux assistants vocaux, comme cela permettrait aux utilisateurs de parler à des assistants sans apprendre des phrases précises pour atteindre l'objectif souhaité. résultat. Bien que nous ne puissions pas dire à quel point la mise en œuvre de Huawei est efficace (nous n'avons pas HiAssistant fonctionnant sur un appareil en direct et nous ne parlons pas non plus d'un les langues chinoises qu'il prend en charge), les références à NLU sont éparpillées dans tout le code, nous supposons donc que c'est un objectif majeur pour le technologie.
Disponibilité de HiAssistant
Tout d'abord, il est clair que HiAssistant va être disponible uniquement pour les utilisateurs en Chine, et uniquement sur les appareils Huawei avec le Kirin 970 en cours d'exécution EMUI 8.1. Nous avons examiné les fichiers du firmware pour une version internationale d'EMUI 8.1 pour le Huawei P20 et P20Plus et je n'ai pas pu trouver ces applications. De plus, lors de l'examen du firmware du Huawei Mate 10 chinois sur EMUI 8.0, le HiAssistant n'était pas non plus disponible. Enfin, le service HiAI est limité au Kirin 970 (car il exploite son NPU) et ne sera donc pas disponible sur les autres appareils Kirin.
Contrôle des appareils HiAssistant
La dernière version de l'EMUI (Emotion UI) de Huawei est actuellement disponible en version 8.0 pour une poignée de ses appareils. La version 8.1 sera bientôt disponible, probablement avec la sortie de la prochaine série Huawei P20, et elle s'ajoutera au nombre déjà énorme de fonctionnalités disponibles dans EMUI. Comme Samsung Bixby, HiAssistant permettra à l'utilisateur de contrôler presque tous les paramètres de l'appareil avec leur voix.
La liste des paramètres de l'appareil pouvant être contrôlés est trop longue pour que je puisse la lister, je la publierai donc des captures d'écran de toutes les constantes de l'application HiAssistant qui font référence aux paramètres disponibles pour contrôle. En général, vous devez vous attendre à contrôler non seulement toutes les fonctions matérielles de base (Bluetooth, NFC, Wi-Fi), mais également toutes les fonctions logicielles. ainsi (rotation automatique, mode nuit, niveaux de volume, température de couleur de l'écran, mode gants, paramètres de localisation, point d'accès/données mobiles, etc.)
Il est intéressant de noter que plusieurs chaînes suggèrent que HiAssistant est capable de contrôler des applications chinoises populaires telles que QQ et WeChat. Nous avons découvert d'autres chaînes qui font allusion à d'autres intentions que l'application HiAssistant est capable d'envoyer, notamment chaînes liées aux appels téléphoniques, aux cartes/navigation, aux messages, à la lecture de musique/vidéo, à la navigation dans les pages, etc. plus.
Recherche et intégrations HiAssistant
Dans les intentions présentées ci-dessus, nous pouvons voir que HiAssistant offre la possibilité de rechercher de la nourriture, émoticônes, bus, musique, billets d'avion, itinéraires de navigation, taxis, billets de train, vidéos et via Weibo. L'assistant offrira également la possibilité de rechercher des catégories spécifiques d'éléments, notamment des albums de musique, des dessins animés, des livres, des films, des émissions de télévision, etc.
Sans entrer dans trop de détails, le fonctionnement de ces analyseurs après le traitement NLU repose sur une série d'expressions régulières compliquées (regex). Par exemple, voici un extrait de code de la méthode d'analyse Anime.
Plusieurs intégrations sont mentionnées dans l'Assistant de Huawei, mais l'une des plus importantes semble être la possibilité d'envoyer des paiements à plusieurs des principales banques chinoises directement depuis l'application.
HiVision
Enfin, Huawei proposera un ensemble de fonctionnalités qui rappellent Google Lens. Baptisé HiVision, il sera capable de reconnaître des catégories d'objets tels que de la nourriture, des passeports, des personnes, des accessoires, des animaux, des appareils électroménagers, des outils, des jouets, des véhicules, etc. La plate-forme HiAI Mobile Computing permettra à des applications tierces d'utiliser sa reconnaissance de scène pour reconnaître la plage, les vélos, les voitures, les chats, les chiens, les feux d'artifice, les fleurs, etc. Enfin, HiVision peut également lire des codes-barres, du texte et bien plus encore, comme Google Lens.
Conclusion
À en juger par cet ensemble de fonctionnalités (que, encore une fois, nous n'avons pas pu tester correctement), il est clair que Huawei vise à devenir un véritable concurrent de Google Assistant, Amazon Alexa et Apple Siri, du moins dans Chine. HiAssistant offrira non seulement un contrôle quasi total du smartphone, mais s'intégrera également à de nombreux services chinois populaires afin de simplifier la vie d'un citoyen chinois.
Il n'est pas clair si les efforts de Huawei dans ce domaine se traduiront d'une manière ou d'une autre par une éventuelle sortie internationale, car Huawei semble se contenter de travailler avec Amazon et Google sur les marchés internationaux. Si je parlais mandarin, j'adorerais tester HiAssistant et HiVoice de Huawei, mais malheureusement nous ne saurons pas comment l'assistant virtuel sera efficace jusqu'à ce que EMUI 8.1 soit rendu officiel et que les utilisateurs en Chine aient la possibilité de le tester dehors.