YouTube тестує технологію на основі штучного інтелекту, покликану синхронізувати рухи губ спікерів з автоматичним дубляжем на інші мови. Ця розробка доповнює вже наявну функцію автоперекладу аудіодоріжки. Для реалізації цього завдання команді довелося створити інструменти, здатні "модифікувати пікселі на екрані так, щоб вони відповідали перекладеній мові".

Система аналізує не лише форму губ, але й положення зубів, міміку та інші візуальні параметри. На поточному етапі тестування технологія показала найкращі результати у відео Full HD, хоча якість у 4K планується покращити до офіційного запуску. Функція, вперше продемонстрована у вересні, наразі перебуває на ранній стадії тестування і доступна обмеженому колу користувачів.

Перша версія підтримує синхронізацію губ при перекладі на англійську, французьку, німецьку, іспанську та португальську мови, з планами на подальше розширення охоплення на всі мови автодублювання, включно з українською.

💻 Підписатись