O Google está se preparando para permitir que você use “Live Captions” durante chamadas telefônicas

O Google criou legendas ao vivo para ajudar os usuários com deficiência auditiva a acompanhar um vídeo. Agora, parece que o Google irá habilitar esse recurso para chamadas telefônicas.

O Google anunciou pela primeira vez seu "Legendas ao vivo"recurso de acessibilidade no Google I/O 2019 no ano passado. Usando três modelos de aprendizado de máquina no dispositivo, esse recurso detecta fala em inglês na mídia e gera legendas automaticamente. O recurso foi disponibilizado pela primeira vez no Pixel 4, mas posteriormente expandido para o Pixel 3a, Pixel 3, Pixel 2, Samsung Galaxy S20, OnePlus 7T, e OnePlus 8. Desde o lançamento do recurso, no entanto, ele não recebeu nenhuma atualização em sua funcionalidade. No entanto, isso pode mudar em breve, pois detectamos evidências de que o Google permitirá que o Live Caption funcione em chamadas telefônicas.

Muitas vezes, a desmontagem de um APK pode prever recursos que podem chegar em uma atualização futura de um aplicativo, mas é possível que qualquer um dos recursos mencionados aqui não chegue em uma versão futura. Isso ocorre porque esses recursos não estão atualmente implementados na versão ativa e podem ser retirados a qualquer momento pelos desenvolvedores em uma versão futura.

No Android 11 Developer Preview 3 para Google Pixel 4, analisamos a versão 2.13.302920511 do Device Personalization Services, aplicativo responsável pelas Live Captions. Nele, identificamos strings que afirmam que os usuários poderão ativar a legenda ao vivo por meio de uma chamada telefônica.

<stringname="call_confirmation_cancel">CANCELstring>
<stringname="call_confirmation_confirmation_message">Enable Live Caption over this phone call? Your use of the feature will be annonunced to others on the call.string>
<stringname="call_confirmation_dialog_name">Enable Live Caption confirmation dialogstring>
<stringname="call_confirmation_enable">ENABLEstring>
<stringname="call_other_side_transcription_prefix">Callerstring>
<stringname="call_system_message_prefix">Systemstring>
<stringname="call_turn_indicator_text">string>
<stringname="call_user_typed_input_prefix">You typedstring>

Ativar o recurso por meio de uma chamada telefônica anunciará a todos os participantes que a chamada está sendo transcrita em legendas. Um arquivo de áudio será reproduzido na chamada telefônica, e esse arquivo de áudio simplesmente diz a seguinte linha:

<stringname="system_message_start_call_speaking_mode">Hi, the person you’re about to speak with has call captions turned on. They’ll see captions of what you say to help them listen along.string>

Atualmente, a API da qual o Live Captions depende, AudioPlaybackCaptureConfiguration, não permite captura de áudio de chamada de voz. Contudo, é possível que um nova permissão somente do sistema adicionada no Android 11 Developer Preview 3 permitirá que o recurso ignore essa restrição.


Obrigado à PNF Software por nos fornecer uma licença para usar Descompilador JEB, uma ferramenta de engenharia reversa de nível profissional para aplicativos Android.