Google bereitet die Verwendung von „Live-Untertiteln“ bei Telefongesprächen vor

Google hat Live-Untertitel entwickelt, um Nutzern mit Hörbehinderungen zu helfen, einem Video zu folgen. Nun scheint es, dass Google diese Funktion für Telefonanrufe aktivieren wird.

Google kündigte erstmals seine „Live-Untertitel"Barrierefreiheitsfunktion auf der Google I/O 2019 letztes Jahr. Mithilfe von drei Modellen für maschinelles Lernen auf dem Gerät erkennt diese Funktion englischsprachige Sprache in Medien und generiert automatisch Untertitel. Die Funktion wurde zuerst auf dem Pixel 4 verfügbar gemacht, später jedoch auf das ausgeweitet Pixel 3a, Pixel 3, Pixel 2, Samsung Galaxy S20, OnePlus 7T, Und OnePlus 8. Seit der Einführung der Funktion wurden jedoch keine Aktualisierungen ihrer Funktionalität vorgenommen. Das könnte sich jedoch bald ändern, da wir Hinweise darauf entdeckt haben, dass Google Live Caption auch bei Telefonanrufen zulassen wird.

Ein APK-Teardown kann oft Funktionen vorhersagen, die in einem zukünftigen Update einer Anwendung verfügbar sein werden, aber es ist möglich, dass eine der hier erwähnten Funktionen in einer zukünftigen Version nicht verfügbar sein wird. Dies liegt daran, dass diese Funktionen derzeit im Live-Build nicht implementiert sind und von den Entwicklern jederzeit in einem zukünftigen Build übernommen werden können.

In Android 11 Developer Preview 3 für Google Pixel 4 haben wir die Version 2.13.302920511 von Device Personalization Services analysiert, der Anwendung, die für Live-Untertitel verantwortlich ist. Darin haben wir Zeichenfolgen entdeckt, die besagen, dass Benutzer Live-Untertitel über einen Telefonanruf aktivieren können.

<stringname="call_confirmation_cancel">CANCELstring>
<stringname="call_confirmation_confirmation_message">Enable Live Caption over this phone call? Your use of the feature will be annonunced to others on the call.string>
<stringname="call_confirmation_dialog_name">Enable Live Caption confirmation dialogstring>
<stringname="call_confirmation_enable">ENABLEstring>
<stringname="call_other_side_transcription_prefix">Callerstring>
<stringname="call_system_message_prefix">Systemstring>
<stringname="call_turn_indicator_text">string>
<stringname="call_user_typed_input_prefix">You typedstring>

Wenn Sie die Funktion während eines Telefonanrufs aktivieren, wird allen Teilnehmern mitgeteilt, dass der Anruf in Untertitel transkribiert wird. Im Telefonat wird eine Audiodatei abgespielt, und diese Audiodatei sagt einfach die folgende Zeile:

<stringname="system_message_start_call_speaking_mode">Hi, the person you’re about to speak with has call captions turned on. They’ll see captions of what you say to help them listen along.string>

Derzeit ist die API, auf der Live Captions basiert, AudioPlaybackCaptureConfiguration, lässt es nicht zu Aufnahme von Sprachanruf-Audio. Es ist jedoch möglich, dass a Neue systemspezifische Berechtigung in Android 11 Developer Preview 3 hinzugefügt ermöglicht es der Funktion, diese Einschränkung zu umgehen.


Vielen Dank an PNF Software für die Bereitstellung einer Nutzungslizenz JEB-Decompiler, ein professionelles Reverse-Engineering-Tool für Android-Anwendungen.