Prime Video тестирует ИИ-синхронизацию губ для дубляжа
Amazon Prime Video запускает функцию на основе искусственного интеллекта, которая согласует движения губ актеров с переведенной речью. Пока она доступна только в английской версии дубляжа немецкого сериала Maxton Hall. Prime Video сообщает, что в дальнейшем планирует использовать технологию и в других проектах.
По данным компании, система объединяет искусственный интеллект и технологии визуальных эффектов. С их помощью движения рта подстраиваются под дублированные реплики, чтобы они лучше совпадали с произносимыми словами. В объявлении аудио названо «дублированным людьми», что отличает функцию от инструментов, автоматически создающих весь дубляж.
Похожие разработки недавно представили другие видеоплатформы. Meta и YouTube запустили автоматический дубляж с использованием ИИ для авторов. На обеих платформах также есть настройка синхронизации губ, призванная сделать так, чтобы речь на выбранном языке выглядела более согласованной с движениями рта создателя. Нынешний запуск Prime Video ограничен английским дубляжом Maxton Hall.
Текст подготовлен ИИ Sakhanda Wire по материалу The Verge. Факты, цитаты и полный контекст — в оригинальной статье ниже.