Universal Translator używa sztucznej inteligencji do synchronizacji ruchu warg i tłumaczenia filmów, ale nie będziesz mógł z niego korzystać

Uniwersalny tłumacz Google to prywatny eksperyment, który firma testuje wraz z niektórymi partnerami, aby tłumaczyć filmy w bardziej naturalny sposób.

Podczas konferencji programistów I/O firma Google ogłosiła dzisiaj, że pracuje nad eksperymentem o nazwie Tłumacz uniwersalny. Jak sama nazwa wskazuje, to narzędzie ma na celu tłumaczenie filmów z jednego języka na inny, przy jednoczesnym zachowaniu ogólnego tonu i klimatu. Oznacza to, że narzędzie nie tylko tłumaczy dźwięk z jednego języka na inny, ale także naśladuje głos, ton i wyraz twarzy osoby mówiącej. Zgadza się, wyjściowy film przedstawiający mówiącą osobę zsynchronizuje ruchy ust w oparciu o wypowiedzi w języku docelowym.

Biorąc pod uwagę, że narzędzie to może zostać wykorzystane do tworzenia problematycznych deepfake’ów, Google ogranicza dostęp do Universal Translator. W rezultacie tylko autoryzowani partnerzy będą mogli wykorzystać jego moc do konstruktywnych projektów, podczas gdy użytkownicy w ogóle zostaną wykluczeni. Chociaż to posunięcie ogranicza obiecujący potencjał Universal Translator, pomaga trzymać z daleka złych aktorów.

Jak pokazuje grafika na powyższym zdjęciu, Universal Translator najpierw wykrywa słowa i je tłumaczy. Następnie sprawdza ton mówiącego i to, na czym się skupia. Po połączeniu tych dwóch aspektów generuje mowę w języku docelowym. Na koniec synchronizuje usta osoby mówiącej w filmie w oparciu o wymowę głosu wygenerowanego przez sztuczną inteligencję.

Oprócz Universal Translator Google uruchomił dziś inne narzędzia oparte na sztucznej inteligencji, m.in ulepszona nawigacja w Mapach, A inteligentniejsza wyszukiwarka Google, i więcej. Warto zauważyć, że firma wypuściła także na rynek niektóre ze swojego długo oczekiwanego sprzętu, takie jak Piksel 7a, Pixel Fold i Pixel Tablet. Biorąc jednak pod uwagę obecne trendy krążące wokół sztucznej inteligencji, firma poświęciła temu znaczny kawałek swojego przemówienia, aby zapoznać się z narzędziami opartymi na sztucznej inteligencji, zamiast skupiać się głównie na sprzęcie i nadchodzącym systemie operacyjnym Android cechy.

Osoby zainteresowane wysłuchaniem głównego przemówienia mogą ponownie obejrzeć transmisję po jej zakończeniu na oficjalnym kanale Google w serwisie YouTube.