Universal Translator използва AI за синхронизиране на устни и превод на видеоклипове, но няма да можете да го използвате

Универсалният преводач на Google е частен експеримент, който компанията тества с определени партньори, за да превежда видеоклипове по по-естествен начин.

По време на I/O конференцията за разработчици Google обяви днес, че работи върху експеримент, наречен Универсален преводач. Както подсказва името му, този инструмент има за цел да превежда видеоклипове от един език на друг, като същевременно запазва общия тон и атмосфера. Това означава, че помощната програма не само превежда звука от един език на друг, но също така имитира гласа, тона и изражението на лицето на говорещия. Точно така, изведеното видео на човек, който говори, ще синхронизира движенията на устните въз основа на изказванията на целевия език.

Като се има предвид, че този инструмент може да бъде злоупотребен за създаване на проблемни deepfakes, Google ограничава достъпа до Universal Translator. Следователно само оторизирани партньори ще могат да използват силата му за конструктивни проекти, докато потребителите като цяло ще бъдат изключени. Въпреки че този ход ограничава обещаващия потенциал на Universal Translator, той помага да се държат лошите актьори настрана.

Както показва графиката на снимката по-горе, Universal Translator първо открива думите и ги превежда. След това проверява тона на говорещия и върху какво набляга. След като комбинира тези два аспекта, той генерира речта на целевия език. И накрая, той синхронизира устните на говорещия във видеото въз основа на произношението на гласа, генериран от AI.

Освен Универсалния преводач, Google пусна днес други инструменти, базирани на AI, включително подобрена навигация в Карти, а по-интелигентно Google Търсене, и още. Трябва да се отбележи, че компанията пусна и някои от дългоочаквания си хардуер, като например Pixel 7a, Pixel Fold и Pixel Tablet. Въпреки това, като се имат предвид настоящите тенденции, въртящи се около изкуствения интелект, компанията отдели значителна част от основната си бележка, за да визуализира своите базирани на AI инструменти, вместо да се фокусира най-вече върху неговия хардуер и предстоящата Android OS Характеристика.

Тези, които се интересуват да видят основната бележка, могат да гледат отново потока, след като приключи, чрез официалния канал на Google в YouTube.