Live Caption è una nuova funzionalità di Android 10 che debutterà su Google Pixel 4. L'abbiamo fatto funzionare prima del rilascio per mostrarti com'è.
Oltre all'Assistente Google di nuova generazione, una delle nuove funzionalità più interessanti per Android 10 che Google ha mostrato all'I/O quest'anno è stata Live Caption. Fa parte della spinta di Google rendere Android più accessibile per utenti con disabilità come problemi di udito e ciò che fa è trascrivere l'audio riprodotto sul dispositivo in sottotitoli che fluttuano sullo schermo. Funziona offline e con la maggior parte delle app che riproducono audio sul telefono, inclusi video e podcast. Google ha presentato una dimostrazione della funzionalità in un video preregistrato riprodotto all'I/O, ma invece di renderla immediatamente disponibile come la Trascrizione istantanea, la distribuirà a "telefoni selezionati" con Android Q entro la fine dell'anno." Grazie a un APK inedito ottenuto dal Pixel 4 XL, siamo riusciti a far funzionare Live Caption prima dell'implementazione generale della funzionalità disponibilità. Ecco il nostro primo sguardo alla nuova funzionalità.
Grazie a Nextrift, abbiamo messo le mani su un tesoro di APK del Pixel 4, incluso il APK di Motion Sense e il nuovi sfondi live. Uno degli APK che ci hanno inviato è una versione inedita di "Servizi di personalizzazione del dispositivo". Questa app è responsabile della visualizzazione dei collegamenti alle app nella panoramica delle app recenti e nel cassetto delle app di Pixel Launcher, ed è anche ciò che consente ai proprietari di Pixel di selezionare testo e immagini nelle app recenti panoramica. La versione 1.6.255525616 dell'app è tecnicamente più vecchia di quella pubblicamente disponibile (l'ultima su APKMirror è la versione 2.0.268948072) ma non è mai stata rilasciata pubblicamente. Con questo APK installato sul mio Pixel 2 XL e alcune altre modifiche, sono riuscito a far apparire Live Caption nelle impostazioni di Android 10.
Come puoi vedere nel primo screenshot a sinistra mostrato di seguito, la pagina delle impostazioni principali per Live Caption ha 3 opzioni. La prima opzione è cambiare la lingua, anche se attualmente è limitata all'inglese poiché è l'unica lingua supportata al momento del lancio. Purtroppo non ci sono suggerimenti su quali altre lingue potrebbero essere supportate in futuro. Successivamente, possiamo vedere un interruttore per mascherare parolacce. Ciò sostituirà le parolacce con asterischi nella didascalia. Infine, c'è un'opzione per mostrare un interruttore Live Caption nel pannello del volume. Oltre a questi tre interruttori, c'è anche un breve video dimostrativo della funzione e un testo in basso che spiega come funziona.
Verrà visualizzata una finestra di dialogo quando la funzione rileva che l'audio viene riprodotto per la prima volta. Puoi interrompere i sottotitoli scorrendo verso il basso il pannello delle notifiche, espandendo la notifica "Sottotitoli in tempo reale", quindi toccando il pulsante "Interrompi". Puoi anche trascinare la didascalia verso il basso per eliminarla come puoi fare con le finestre Picture in Picture o bolle.
Per impostazione predefinita, le didascalie vengono visualizzate al centro dello schermo in modalità verticale e leggermente sopra la parte inferiore in modalità orizzontale. Puoi toccare e trascinare la didascalia verso l'alto o verso il basso per riposizionarla oppure puoi toccarla due volte per espanderla.
Ho testato la funzionalità su YouTube, Google Podcasts, Google Foto, Amazon Prime Video e Netflix e ha funzionato in tutte queste app. È stato abbastanza preciso da permettermi di capire cosa veniva detto senza dover alzare il volume, ma non voglio rivedere o testare completamente la funzionalità finché non verrà rilasciata ufficialmente.
Live Caption non funziona nelle telefonate, nelle chiamate vocali o nelle videochiamate a causa di una limitazione nell'API utilizzata da questa funzionalità. Questa stessa API è ciò che consente audio interno da registrare in Android 10, tuttavia, poiché Device Personalized Services è un'app di sistema, esso ha meno limitazioni rispetto alle app di registrazione dello schermo.
Ecco una registrazione dello schermo che mostra la funzionalità funzionante sul mio Pixel 2 XL. Come puoi vedere, generalmente cattura ciò che TK sta dicendo nel suo OnePlus 7T video unboxing, anche se ci sono alcuni errori qua e là.
Google afferma che Live Caption sarà disponibile per "dispositivi selezionati di fascia alta" a causa di vincoli di memoria e spazio. L'azienda prevedeva di rilasciare un elenco di dispositivi che supporteranno la funzionalità man mano che ci avvicinavamo al rilascio stabile di Android 10, ma questo ovviamente non è mai successo. Scommetto che Google farà debuttare la funzionalità su Pixel 4, ma è strano che la pubblicizzino sulla pagina web ufficiale di Android 10 quando nessun dispositivo ha ancora la funzionalità. Una volta che la funzionalità sarà disponibile per gli utenti, te lo faremo sapere.