Universal Translator bruger AI til at læbesynkronisere og oversætte videoer, men du vil ikke være i stand til at bruge det

click fraud protection

Googles Universal Translator er et privat eksperiment, som virksomheden tester med visse partnere for at oversætte videoer på en mere naturlig måde.

Under sin I/O-udviklerkonference annoncerede Google i dag, at de arbejder på et eksperiment kaldet Universal oversætter. Som navnet antyder, har dette værktøj til formål at oversætte videoer fra et sprog til et andet, samtidig med at den overordnede tone og stemning bevares. Dette betyder, at værktøjet ikke kun oversætter lyden fra et sprog til et andet, men det efterligner også talerens stemme, tone og ansigtsudtryk. Det er rigtigt, den udsendte video af en person, der taler, vil synkronisere læbernes bevægelser baseret på målsprogets ytringer.

I betragtning af at dette værktøj kan misbruges til at skabe problematiske deepfakes, begrænser Google adgangen til Universal Translator. Det er derfor kun autoriserede partnere, der kan udnytte sin magt til konstruktive projekter, mens brugere generelt vil blive udelukket. Selvom dette træk begrænser Universal Translator's lovende potentiale, hjælper det med at holde dårlige skuespillere på afstand.

Som grafikken på billedet ovenfor afspejler, registrerer Universal Translator først ordene og oversætter dem. Derefter tjekker den højttalerens tone, og hvad de stresser på. Efter at have kombineret disse to aspekter genererer den talen på målsproget. Til sidst synkroniserer den højttalerens læber i videoen baseret på udtalen af ​​den AI-genererede stemme.

Bortset fra Universal Translator lancerede Google i dag andre AI-drevne værktøjer, herunder forbedret navigation i Maps, a smartere Google-søgning, og mere. Navnlig lancerede virksomheden også noget af dets længe ventede hardware, såsom Pixel 7a, Pixel Fold og Pixel Tablet. Men i betragtning af de nuværende tendenser omkring kunstig intelligens, dedikerede virksomheden en betydelig del af sin keynote for at forhåndsvise sine AI-drevne værktøjer i stedet for mest at fokusere på sin hardware og kommende Android OS funktioner.

De, der er interesserede i at tjekke hovedtonen, kan gense strømmen, efter den er afsluttet via Googles officielle YouTube-kanal.