Live Caption är en ny funktion i Android 10 som kommer att debutera på Google Pixel 4. Vi fick det att fungera före release för att visa dig hur det är.
Förutom nästa generations Google Assistant, var en av de coolaste nya funktionerna för Android 10 som Google visade upp på I/O i år Live Caption. Det är en del av Googles strävan att göra Android mer tillgängligt för användare med funktionshinder som hörselnedsättning, och vad den gör är att transkribera ljud som spelas på enheten till bildtexter som flyter på skärmen. Det fungerar offline och med de flesta appar som spelar upp ljud på din telefon, inklusive videor och podcaster. Google demonstrerade funktionen i en förinspelad video som spelas upp på I/O, men istället för att göra den omedelbart tillgänglig som Live Transcribe kommer de att rulla ut den till "utvalda telefoner kör Android Q senare i år." Tack vare en outgiven APK som vi fick från Pixel 4 XL, lyckades vi få Live Caption att fungera före funktionens allmänna tillgänglighet. Här är vår första titt på den nya funktionen.
Tack vare Nextrift, fick vi tag i en skattkammare av APK-filer från Pixel 4, inklusive Motion Sense APK och den nya levande bakgrundsbilder. En av APK-filerna som de också skickade till oss är en outgiven version av "Device Personalization Services." Denna app är ansvarig för att visa appgenvägar i översikten över de senaste apparna och applådan för Pixel Launcher, och det är också det som gör att Pixel-ägare kan välja text och bilder i de senaste apparna Översikt. Version 1.6.255525616 av appen är tekniskt sett äldre än vad som är allmänt tillgängligt – den senaste versionen på APKMirror är version 2.0.268948072 – men den har aldrig släppts offentligt. Med denna APK installerad på min Pixel 2 XL och några andra tweaks kunde jag få Live Caption att dyka upp i Android 10:s inställningar.
Som du kan se i den första skärmdumpen till vänster som visas nedan, har huvudinställningssidan för Live Caption 3 alternativ. Det första alternativet är att ändra språket, även om det för närvarande är begränsat till engelska eftersom det är det enda språk som stöds vid lanseringen. Det finns tyvärr inga tips om vilka andra språk som kan komma att stödjas i framtiden. Därefter kan vi se en växel för att maskera svordomar. Detta kommer att ersätta förbannelseord med asterisker i bildtexten. Slutligen finns det ett alternativ att visa en Live Caption-växling i volympanelen. Förutom dessa tre växlar finns det också en kort videodemo av funktionen och text längst ner som förklarar hur det fungerar.
Du kommer att se en dialogruta visas när funktionen upptäcker att ljud spelas upp för första gången. Du kan stoppa textning genom att svepa nedåt i meddelandepanelen, expandera "Live Caption"-meddelandet och sedan trycka på "stopp"-knappen. Du kan också dra bildtexten nedåt för att ta bort den som du kan med bild-i-bild-fönster eller bubblor.
Som standard visas bildtexterna i mitten av skärmen i stående läge och något ovanför botten i liggande läge. Du kan trycka och dra bildtexten uppåt eller nedåt för att flytta den, eller så kan du dubbelklicka på bildtexten för att expandera den.
Jag testade funktionen i YouTube, Google Podcasts, Google Photos, Amazon Prime Video och Netflix, och det fungerade i alla dessa appar. Det var tillräckligt korrekt för att jag skulle förstå vad som sades utan att behöva höja volymen, men jag vill inte granska eller testa funktionen helt förrän den släpps officiellt.
Live Caption fungerar inte i telefonsamtal, röstsamtal eller videosamtal på grund av en begränsning i API: et som används av den här funktionen. Samma API är vad som tillåter internt ljud som ska spelas in i Android 10, men eftersom Device Personalization Services är en systemapp, är det har färre begränsningar än skärminspelningsappar.
Här är en skärminspelning som visar funktionen som fungerar på min Pixel 2 XL. Som du kan se fångar det generellt vad TK säger i sitt OnePlus 7T unboxing video, även om det finns några fel här och där.
Google säger att Live Caption kommer att vara tillgänglig för "utvalda, avancerade enheter" på grund av minnes- och utrymmesbegränsningar. Företaget planerade att släppa en lista över enheter som kommer att stödja funktionen när vi närmade oss den stabila Android 10-utgåvan, men som uppenbarligen aldrig hände. Jag slår vad om att Google kommer att debutera funktionen på Pixel 4, men det är konstigt att de har annonserat om den på den officiella webbsidan för Android 10 när inga enheter har funktionen ännu. När funktionen rullar ut för användarna kommer vi att meddela dig.