Live Caption er en ny funksjon i Android 10 som skal debutere på Google Pixel 4. Vi fikk det til å fungere før utgivelsen for å vise deg hvordan det er.
Foruten neste generasjons Google Assistant, var en av de kuleste nye funksjonene for Android 10 som Google viste frem på I/O i år, Live Caption. Det er en del av Googles push til gjør Android mer tilgjengelig for brukere med funksjonshemminger som hørselshemming, og det den gjør er å transkribere lyd som spilles av på enheten til bildetekster som flyter på skjermen. Det fungerer offline og med de fleste apper som spiller av lyd på telefonen din, inkludert videoer og podcaster. Google demonstrerte funksjonen i en forhåndsinnspilt video som spilles av ved I/O, men i stedet for å gjøre den umiddelbart tilgjengelig som Live Transkribering, vil de rulle den ut til "utvalgte telefoner kjører Android Q senere i år." Takket være en uutgitt APK vi fikk fra Pixel 4 XL, klarte vi å få Live Caption til å fungere foran funksjonens generelle tilgjengelighet. Her er vår første titt på den nye funksjonen.
Takk til Nextrift, har vi fått tak i en skattekiste av APK-er fra Pixel 4, inkludert Motion Sense APK og nye levende bakgrunnsbilder. En av APK-ene de også sendte oss er en uutgitt versjon av «Device Personalization Services». Denne appen er ansvarlig for å vise app-snarveier i den nylige appoversikten og Pixel Launcher-appskuffen, og det er også det som lar Pixel-eiere velge tekst og bilder i de siste appene oversikt. Versjon 1.6.255525616 av appen er teknisk eldre enn det som er offentlig tilgjengelig – det siste på APKMirror er versjon 2.0.268948072 – men det har aldri vært offentlig utgitt. Med denne APK-en installert på min Pixel 2 XL og noen andre justeringer, klarte jeg å få Live Caption til å vises i Android 10s innstillinger.
Som du kan se i det første skjermbildet til venstre vist nedenfor, har hovedinnstillingssiden for Live Caption 3 alternativer. Det første alternativet er å endre språket, selv om det for øyeblikket er begrenset til engelsk siden det er det eneste støttede språket ved lansering. Det er ingen hint om hvilke andre språk som kan støttes i fremtiden, dessverre. Deretter kan vi se en bryter for å maskere banning. Dette vil erstatte banneord med stjerner i bildeteksten. Til slutt er det et alternativ for å vise en Live Caption-bryter i volumpanelet. Foruten disse tre bryterne, er det også en kort videodemo av funksjonen og tekst nederst som forklarer hvordan den fungerer.
Du vil se en dialogboks når funksjonen oppdager at lyd spilles av for første gang. Du kan stoppe teksting ved å sveipe ned varslingspanelet, utvide «Live Caption»-varselet og deretter trykke på «stopp»-knappen. Du kan også dra bildeteksten ned for å avvise den som du kan med bilde-i-bilde-vinduer eller bobler.
Som standard vises bildetekstene midt på skjermen i portrettmodus og litt over bunnen i liggende modus. Du kan trykke og dra bildeteksten opp eller ned for å flytte den, eller du kan dobbelttrykke på bildeteksten for å utvide den.
Jeg testet funksjonen i YouTube, Google Podcasts, Google Photos, Amazon Prime Video og Netflix, og den fungerte i alle disse appene. Det var nøyaktig nok til at jeg kunne forstå hva som ble sagt uten å måtte skru opp volumet, men jeg ønsker ikke å gjennomgå eller teste funksjonen helt før den er offisielt utgitt.
Live Caption fungerer ikke i telefonsamtaler, taleanrop eller videosamtaler på grunn av en begrensning i API-en som brukes av denne funksjonen. Det samme API er det som tillater intern lyd som skal tas opp i Android 10, men siden Device Personalization Services er en systemapp, er det har færre begrensninger enn skjermopptaksapper.
Her er et skjermopptak som viser funksjonen som fungerer på min Pixel 2 XL. Som du kan se, fanger det generelt opp hva TK sier i sitt OnePlus 7T unboxing video, selv om det er noen feil her og der.
Google sier at Live Caption vil være tilgjengelig for "utvalgte, avanserte enheter" på grunn av minne- og plassbegrensninger. Selskapet planla å gi ut en liste over enheter som vil støtte funksjonen når vi nærmet oss den stabile Android 10-utgivelsen, men som åpenbart aldri skjedde. Jeg satser på at Google vil debutere funksjonen på Pixel 4, men det er merkelig at de har annonsert den på den offisielle nettsiden for Android 10 når ingen enheter har funksjonen ennå. Når funksjonen rulles ut for brukere, gir vi deg beskjed.