Universal Translator ใช้ AI เพื่อลิปซิงค์และแปลวิดีโอ แต่คุณจะไม่สามารถใช้งานได้

Universal Translator ของ Google เป็นการทดลองส่วนตัวที่บริษัทกำลังทดสอบกับพันธมิตรบางรายเพื่อแปลวิดีโอในลักษณะที่เป็นธรรมชาติมากขึ้น

ในระหว่างการประชุมนักพัฒนา I/O Google ได้ประกาศในวันนี้ว่ากำลังดำเนินการทดสอบที่เรียกว่า นักแปลสากล. ตามชื่อของมัน เครื่องมือนี้มีจุดมุ่งหมายเพื่อแปลวิดีโอจากภาษาหนึ่งเป็นอีกภาษาหนึ่ง โดยที่ยังคงรักษาน้ำเสียงและบรรยากาศโดยรวมไว้ ซึ่งหมายความว่ายูทิลิตี้นี้ไม่เพียงแต่แปลเสียงจากภาษาหนึ่งเป็นอีกภาษาหนึ่งเท่านั้น แต่ยังเลียนแบบเสียง น้ำเสียง และการแสดงออกทางสีหน้าของผู้พูดอีกด้วย ใช่แล้ว วิดีโอที่ส่งออกออกมาของผู้พูดจะซิงค์การเคลื่อนไหวของริมฝีปากตามคำพูดของภาษาเป้าหมาย

เมื่อพิจารณาว่าเครื่องมือนี้สามารถนำไปใช้ในทางที่ผิดเพื่อสร้าง Deepfakes ที่เป็นปัญหาได้ Google จึงจำกัดการเข้าถึง Universal Translator ด้วยเหตุนี้ เฉพาะพันธมิตรที่ได้รับอนุญาตเท่านั้นที่จะสามารถใช้พลังของตนสำหรับโครงการที่สร้างสรรค์ ในขณะที่ผู้ใช้ทั่วไปจะถูกยกเว้น แม้ว่าการเคลื่อนไหวนี้จะจำกัดศักยภาพที่เป็นไปได้ของ Universal Translator แต่ก็ช่วยป้องกันไม่ให้ผู้ไม่ประสงค์ดีเข้ามามีส่วนร่วม

เนื่องจากกราฟิกในรูปภาพด้านบนสะท้อนให้เห็น Universal Translator จะตรวจจับคำและแปลคำเหล่านั้นก่อน จากนั้นจะตรวจสอบน้ำเสียงของผู้พูดและสิ่งที่พวกเขาเน้น หลังจากรวมทั้งสองด้านเข้าด้วยกันแล้ว ก็จะสร้างคำพูดในภาษาเป้าหมาย สุดท้ายจะซิงค์ริมฝีปากของผู้พูดในวิดีโอตามการออกเสียงเสียงที่ AI สร้างขึ้น

นอกเหนือจาก Universal Translator แล้ว Google ยังได้เปิดตัวเครื่องมือที่ขับเคลื่อนด้วย AI อื่นๆ อีกด้วย ซึ่งรวมถึง ปรับปรุงการนำทางในแผนที่, ก Google Search ที่ชาญฉลาดยิ่งขึ้น, และอื่น ๆ. โดยเฉพาะอย่างยิ่ง บริษัทยังได้เปิดตัวฮาร์ดแวร์ที่ได้รับการคาดหวังอย่างสูง เช่น พิกเซล 7a, Pixel Fold และ Pixel Tablet อย่างไรก็ตาม เมื่อพิจารณาถึงแนวโน้มปัจจุบันที่เกี่ยวข้องกับปัญญาประดิษฐ์ บริษัทได้ทุ่มเทส่วนสำคัญ ประเด็นสำคัญเพื่อดูตัวอย่างเครื่องมือที่ขับเคลื่อนด้วย AI แทนที่จะมุ่งเน้นไปที่ฮาร์ดแวร์และระบบปฏิบัติการ Android ที่กำลังจะมาถึงเป็นส่วนใหญ่ คุณสมบัติ.

ผู้ที่สนใจตรวจสอบประเด็นสำคัญหลักสามารถรับชมสตรีมอีกครั้งได้หลังจากสรุปผ่านช่อง YouTube อย่างเป็นทางการของ Google