Universal Translator menggunakan AI untuk menyinkronkan bibir dan menerjemahkan video, tetapi Anda tidak akan dapat menggunakannya

Penerjemah Universal Google adalah eksperimen pribadi yang diuji perusahaan dengan mitra tertentu untuk menerjemahkan video dengan cara yang lebih alami.

Selama konferensi pengembang I/O, Google hari ini mengumumkan bahwa mereka sedang mengerjakan eksperimen yang disebut Penerjemah Universal. Seperti namanya, alat ini bertujuan untuk menerjemahkan video dari satu bahasa ke bahasa lain, dengan tetap mempertahankan nada dan getaran secara keseluruhan. Artinya, utilitas ini tidak hanya menerjemahkan audio dari satu bahasa ke bahasa lain, namun juga meniru suara, nada, dan ekspresi wajah pembicara. Betul sekali, video orang yang berbicara yang dihasilkan akan menyinkronkan gerakan bibir berdasarkan ucapan bahasa sasaran.

Mengingat alat ini dapat disalahgunakan untuk membuat deepfake yang bermasalah, Google membatasi akses ke Universal Translator. Akibatnya, hanya mitra resmi yang dapat memanfaatkan kekuatannya untuk proyek-proyek konstruktif, sementara pengguna secara umum akan dikecualikan. Meskipun langkah ini membatasi potensi yang menjanjikan dari Universal Translator, hal ini membantu mencegah pelaku kejahatan.

Seperti yang ditunjukkan oleh grafik pada foto di atas, Universal Translator pertama-tama mendeteksi kata-kata dan menerjemahkannya. Kemudian, ia memeriksa nada bicara pembicara dan apa yang mereka tekankan. Setelah kedua aspek tersebut digabungkan, maka dihasilkanlah tuturan dalam bahasa sasaran. Terakhir, ia menyinkronkan bibir pembicara dalam video berdasarkan pengucapan suara yang dihasilkan AI.

Selain Universal Translator, hari ini Google meluncurkan alat bertenaga AI lainnya, termasuk peningkatan navigasi di Maps, A Google Penelusuran yang lebih cerdas, dan banyak lagi. Khususnya, perusahaan juga meluncurkan beberapa perangkat keras yang sangat dinantikan, seperti Piksel 7a, Pixel Fold, dan Tablet Piksel. Namun, mengingat tren saat ini seputar Kecerdasan Buatan, perusahaan mendedikasikan sebagian besar dananya dari keynote mereka untuk meninjau alat-alat yang didukung AI, daripada berfokus pada perangkat keras dan OS Android yang akan datang fitur.

Mereka yang tertarik untuk melihat keynote utama dapat menonton ulang streaming tersebut setelah selesai melalui saluran YouTube resmi Google.