Live Caption est une nouvelle fonctionnalité d'Android 10 qui devrait faire ses débuts sur le Google Pixel 4. Nous l'avons fait fonctionner avant sa sortie pour vous montrer à quoi ça ressemble.
Outre l'Assistant Google de nouvelle génération, l'une des nouvelles fonctionnalités les plus intéressantes pour Android 10 que Google a présentées lors de l'I/O cette année était Live Caption. Cela fait partie des efforts de Google pour rendre Android plus accessible pour les utilisateurs handicapés comme les malentendants, et il transcrit l'audio diffusé sur l'appareil en sous-titres qui flottent sur l'écran. Il fonctionne hors ligne et avec la plupart des applications qui lisent de l'audio sur votre téléphone, y compris des vidéos et des podcasts. Google a fait une démonstration de la fonctionnalité dans une vidéo préenregistrée diffusée lors des E/S, mais plutôt que de la rendre immédiatement disponible comme Live Transcribe, ils la déploieront sur « certains téléphones ». fonctionnant sous Android Q plus tard cette année." Grâce à un APK inédit que nous avons obtenu du Pixel 4 XL, nous avons réussi à faire fonctionner Live Caption avant la fonctionnalité générale. disponibilité. Voici notre premier aperçu de la nouvelle fonctionnalité.
Grâce à Suivantrift, nous avons mis la main sur un trésor d'APK du Pixel 4, dont le Sens du mouvement APK et le nouveaux fonds d'écran animés. L'un des fichiers APK qu'ils nous ont également envoyés est une version inédite de « Device Personality Services ». Cette application est chargée d'afficher les raccourcis des applications dans l'aperçu des applications récentes et dans le tiroir d'applications Pixel Launcher, et c'est également ce qui permet aux propriétaires de Pixel de sélectionner du texte et des images dans les applications récentes aperçu. La version 1.6.255525616 de l'application est techniquement plus ancienne que celle disponible publiquement (la dernière sur APKMirror est la version 2.0.268948072), mais elle n'a jamais été rendue publique. Avec cet APK installé sur mon Pixel 2 XL et quelques autres ajustements, j'ai pu faire apparaître Live Caption dans les paramètres d'Android 10.
Comme vous pouvez le voir dans la première capture d'écran à gauche ci-dessous, la page principale des paramètres de Live Caption propose 3 options. La première option consiste à changer la langue, même si elle est actuellement limitée à l'anglais puisque c'est la seule langue prise en charge au lancement. Malheureusement, il n'y a aucune indication sur les autres langues qui pourraient être prises en charge à l'avenir. Ensuite, nous pouvons voir une bascule pour masquer les grossièretés. Cela remplacera les jurons par des astérisques dans la légende. Enfin, il existe une option pour afficher une bascule Live Caption dans le panneau de volume. Outre ces trois options, il existe également une courte démonstration vidéo de la fonctionnalité et un texte en bas expliquant son fonctionnement.
Vous verrez une boîte de dialogue apparaître lorsque la fonction détecte que l'audio est lu pour la première fois. Vous pouvez arrêter le sous-titrage en faisant glisser le panneau de notification vers le bas, en développant la notification « Live Caption », puis en appuyant sur le bouton « Stop ». Vous pouvez également faire glisser la légende vers le bas pour la masquer, comme vous le pouvez avec les fenêtres d'image dans l'image ou bulles.
Par défaut, les légendes apparaissent au milieu de l'écran en mode portrait et légèrement au-dessus du bas en mode paysage. Vous pouvez appuyer et faire glisser la légende vers le haut ou vers le bas pour la repositionner, ou vous pouvez appuyer deux fois sur la légende pour la développer.
J'ai testé la fonctionnalité sur YouTube, Google Podcasts, Google Photos, Amazon Prime Video et Netflix, et elle a fonctionné dans toutes ces applications. C'était suffisamment précis pour que je puisse comprendre ce qui se disait sans avoir à augmenter le volume, mais je ne veux pas examiner ou tester complètement la fonctionnalité avant sa sortie officielle.
Live Caption ne fonctionne pas dans les appels téléphoniques, vocaux ou vidéo en raison d'une limitation de l'API utilisée par cette fonctionnalité. C'est cette même API qui permet audio interne à enregistrer dans Android 10, mais comme Device Personalized Services est une application système, il a moins de limites que les applications d’enregistrement d’écran.
Voici un enregistrement d'écran montrant la fonctionnalité fonctionnant sur mon Pixel 2 XL. Comme vous pouvez le constater, il reflète généralement ce que TK dit dans son discours. OnePlus 7T vidéo de déballage, bien qu'il y ait quelques erreurs ici et là.
Google indique que Live Caption sera disponible pour « certains appareils haut de gamme » en raison de contraintes de mémoire et d’espace. La société prévoyait de publier une liste d'appareils prenant en charge cette fonctionnalité à mesure que nous nous rapprochions de la version stable d'Android 10, mais cela n'est évidemment jamais arrivé. Je parie que Google lancera cette fonctionnalité sur le Pixel 4, mais il est étrange qu'ils en aient fait la publicité sur la page Web officielle d'Android 10 alors qu'aucun appareil ne dispose encore de cette fonctionnalité. Une fois la fonctionnalité déployée pour les utilisateurs, nous vous le ferons savoir.