[Mise à jour: sous-titres en direct sur « certains téléphones »] Google travaille à l'accessibilité avec Live Caption sur Android Q, Live Relay et Live Transcribe

Lors de Google I/O 2019, Google a révélé ses efforts en matière d'accessibilité, tels que Live Caption sur Android Q, Live Relay et Live Transcribe. Continuer à lire!

Mise à jour 1 (10/05/19 à 23 h 53 HE) : Selon EntrepriseBeat, Live Caption ne sera pas disponible sur tous les appareils fonctionnant sous Android Q. Plus de détails ci-dessous.

En tant que consommateurs, nous prenons souvent pour acquis le monde qui nous entoure. Ce que nous expérimentons, nous présumons que tous ceux qui nous entourent le vivent de la même manière, voire de la même manière. Cette présomption s’étend à tous les aspects de notre vie, y compris la technologie. Mais les handicaps sont réels et vivre avec eux devient une tâche difficile en raison de ces présomptions. L'accessibilité devient ainsi un sujet important, et Google contribue à garantir que les personnes handicapées aient une chance équitable de profiter de ces expériences. Android Q intègre plusieurs efforts d'accessibilité de Google pour faire d'Android une expérience beaucoup plus cohérente, bien que toutes les fonctionnalités mentionnées ci-dessous ne soient pas disponibles sur Android pour le moment.

Sous-titre en direct

Beaucoup d’entre nous ne prennent jamais la peine de jeter un deuxième coup d’œil aux paramètres de sous-titres, et nous consommons également beaucoup de médias sans même remarquer l’absence de sous-titres. Mais pour 466 millions de personnes sourdes et malentendantes dans le monde, les sous-titres servent un objectif plus que pratique: ils constituent le moyen même de l'expérience. Android Q intègre les sous-titres en direct, permettant aux utilisateurs de la communauté sourde d'accéder à des expériences avec beaucoup plus de facilité et d'universalité.

Une fois le paramètre activé, Live Caption sous-titrera automatiquement les médias en cours de lecture audio sur votre appareil en un seul clic. Live Caption fonctionne avec les vidéos, les podcasts, les messages audio et toute autre application, même avec les éléments enregistrés sur l'appareil. Les sous-titres apparaîtront dès qu'une parole sera détectée en cours de lecture sur l'appareil. Et comme tout cela se fait grâce à la reconnaissance vocale sur l'appareil, ni l'audio ni les sous-titres ne quittent votre téléphone et vous pouvez utiliser cette fonctionnalité sans avoir besoin du WiFi ou des données cellulaires.

Mise à jour du 10/05/19: Google a confirmé avec EntrepriseBeat que Live Caption "arrivera sur certains téléphones fonctionnant sous Android Q plus tard cette année". Plus précisément, "certains appareils haut de gamme", selon Brian Kemler, chef de produit d'accessibilité Android. La raison est apparemment due à des contraintes de mémoire et d'espace. Le déploiement initial sera limité mais s'étendra au fil du temps, et Google prévoit de publier une liste d'appareils qui bénéficieront de la prise en charge de Live Caption à l'approche de la première version publique d'Android Q.

De plus, Google a confirmé que l'enregistrement de la transcription ne serait pas possible avec Live Captions (en raison d'une limitation intentionnelle dans la configuration AudioPlaybackCaptureConfiguration). API), qu'il ne fonctionnera pas avec les appels téléphoniques, vocaux ou vidéo (car il n'est pas pris en charge par l'API), et qu'il ne prendra en charge que les sous-titres en anglais à lancement. Une fois la fonctionnalité lancée, un modèle hors ligne sera téléchargé et les mises à jour du modèle seront proposées via les services Google Play.

Relais en direct

Live Relay s'appuie sur les idées avancées par Live Caption en permettant aux gens de passer et de recevoir des appels téléphoniques sans avoir à parler ou à entendre.

Live Relay utilise la reconnaissance vocale sur l'appareil et la conversion texte-parole pour permettre au téléphone d'écouter un appel audio, puis d'exprimer les réponses au nom de l'utilisateur qui tape les réponses. La fonctionnalité fonctionne en tandem avec des fonctionnalités de suggestion d'écriture prédictive telles que Rédaction intelligente et Réponse intelligente, ce qui facilite la tenue d'un appel en direct en permettant des réponses rapides. Live Relay fonctionne entièrement sur l'appareil, les appels restent donc privés. Étant donné que Live Relay interagit avec l’autre côté via un appel téléphonique régulier, il peut également fonctionner avec des lignes fixes de l’autre côté.

Bien que Live Relay soit certainement utile à la communauté des sourds et des muets, ses cas d'utilisation s'étendent à situations dans lesquelles quelqu'un peut ne pas être en mesure de parler ou d'entendre un appel téléphonique à ce moment-là, mais souhaite quand même interagir avec ça. Google est également optimiste quant à l'intégration d'une fonctionnalité de traduction en temps réel dans Live Relay, qui à son tour a le potentiel de permettre à n'importe qui d'appeler n'importe qui dans le monde et de communiquer indépendamment des barrières linguistiques.

Google précise que Live Relay est encore en phase de recherche. Il n'est pas immédiatement clair si la fonctionnalité a été intégrée aux versions actuelles d'Android Q - nous pensons qu'elle sera disponible sur les appareils Android à l'avenir.

Live Transcribe – Extension pour les utilisateurs ayant des troubles de la parole

Live Transcribe a été présenté par Google plus tôt cette année en tant qu'outil permettant aux utilisateurs sourds de bénéficier d'une transcription en direct de la parole autour d'eux. L'application visait à rendre les conversations quotidiennes plus accessibles en convertissant la parole du monde réel via le microphone du téléphone en sous-titres en temps réel. La transcription en direct est déjà disponible en version bêta limitée à accès anticipé via le Play Store, avec prise en charge de plus de 70 langues et dialectes. L'application est également préinstallée sur les appareils Pixel 3.

Transcription et notification en directDéveloppeur: Recherche chez Google

Prix ​​: Gratuit.

3.8.

Télécharger

Les derniers efforts de Google pour améliorer l'accessibilité étendent Live Transcribe non seulement aux utilisateurs sourds, mais également aux utilisateurs ayant des troubles de la parole grâce au projet Euphonia.

L’équipe du projet Euphonia utilise l’IA pour améliorer la capacité d’un ordinateur à comprendre divers modèles de parole, y compris les troubles de la parole. Google s'est associé à des organisations à but non lucratif telles que l'ALS Therapy Development Institute et l'ALS Residence Initiative pour enregistrer les voix des personnes. affectés par la SLA, puis utiliser ces enregistrements pour entraîner des modèles d'IA à transcrire de manière plus fiable les mots prononcés par des personnes ayant ce type de discours des difficultés. L'ensemble actuel d'algorithmes d'IA fonctionne avec la langue anglaise pour s'adapter aux personnes handicapées. liés à la SLA, mais Google est optimiste quant à l'application de la recherche à des groupes plus larges et à des discours différents déficiences.

De plus, Google s'appuie également sur cela en formant des algorithmes d'IA personnalisés pour détecter les sons et gestes, puis entreprendre des actions telles que générer des commandes vocales vers Google Home ou envoyer du texte messages. Ce cas d'utilisation est particulièrement utile aux personnes gravement handicapées, incapables de parler et ne pouvant interagir qu'avec des sons non vocaux et des gestes faciaux.

Ces nouvelles fonctionnalités ne semblent pas encore disponibles dans Live Transcribe. Google demande l'aide de volontaires qui ont des difficultés d'élocution ou qui ont du mal à comprendre, et s'ils sont prêts à enregistrer un ensemble de phrases pour aider à mieux entraîner le système à mieux fonctionner. Si vous êtes éligible et souhaitez faire du bénévolat, veuillez remplissez le formulaire pour le même.

Les efforts de Google pour améliorer l'accessibilité de la technologie sont certainement louables. Nous espérons que davantage d’éditeurs de logiciels s’efforceront d’offrir aux personnes handicapées une expérience équitable du monde.


Source 1: GoogleSource 2: GoogleSource 3: Google