Google lavede Live Captions for at hjælpe brugere med hørehandicap med at følge en video. Nu ser det ud til, at Google vil aktivere denne funktion til telefonopkald.
Google annoncerede først sin "Live billedtekster" tilgængelighedsfunktion ved Google I/O 2019 sidste år. Ved at bruge tre maskinlæringsmodeller på enheden registrerer denne funktion engelsksproget tale i medier og genererer billedtekster automatisk. Funktionen blev først gjort tilgængelig på Pixel 4, men senere udvidet til Pixel 3a, Pixel 3, Pixel 2, Samsung Galaxy S20, OnePlus 7T, og OnePlus 8. Siden funktionen blev lanceret, har den dog ikke modtaget nogen opdateringer til dens funktionalitet. Det kan dog snart ændre sig, da vi så beviser på, at Google vil tillade Live Caption at fungere over telefonopkald.
En APK-teardown kan ofte forudsige funktioner, der kan ankomme i en fremtidig opdatering af en applikation, men det er muligt, at nogen af de funktioner, vi nævner her, muligvis ikke kommer med i en fremtidig udgivelse. Dette skyldes, at disse funktioner i øjeblikket ikke er implementeret i live-builden og kan trækkes til enhver tid af udviklerne i en fremtidig build.
I Android 11 Developer Preview 3 til Google Pixel 4 analyserede vi version 2.13.302920511 af Device Personalization Services, applikationen, der er ansvarlig for Live Captions. I den opdagede vi strenge, som statsbrugere vil være i stand til at slå Live Caption til over et telefonopkald.
<stringname="call_confirmation_cancel">CANCELstring>
<stringname="call_confirmation_confirmation_message">Enable Live Caption over this phone call? Your use of the feature will be annonunced to others on the call.string>
<stringname="call_confirmation_dialog_name">Enable Live Caption confirmation dialogstring>
<stringname="call_confirmation_enable">ENABLEstring>
<stringname="call_other_side_transcription_prefix">Callerstring>
<stringname="call_system_message_prefix">Systemstring>
<stringname="call_turn_indicator_text">…string>
<stringname="call_user_typed_input_prefix">You typedstring>Aktivering af funktionen over et telefonopkald vil meddele alle deltagere, at opkaldet bliver transskriberet til billedtekster. En lydfil vil blive afspillet i telefonopkaldet, og denne lydfil siger blot følgende linje:
<stringname="system_message_start_call_speaking_mode">Hi, the person you’re about to speak with has call captions turned on. They’ll see captions of what you say to help them listen along.string>I øjeblikket er API'en, som Live Captions er afhængig af, AudioPlaybackCaptureConfiguration, ikke giver mulighed for optagelse af taleopkaldslyd. Det er dog muligt, at en ny systemtilladelse tilføjet i Android 11 Developer Preview 3 vil tillade funktionen at omgå denne begrænsning.
Tak til PNF Software for at give os en licens til at bruge JEB Decompiler, et professionelt reverse engineeringværktøj til Android-applikationer.