Как устроена функция

Amazon Prime Video представила функцию, которая подстраивает движения губ актёров под дубляж на другом языке. Сервис сочетает ИИ и визуальные эффекты, чтобы артикуляция совпадала с переводной речью. Пока технология работает только на английской звуковой дорожке немецкого сериала «Макстон-холл» (Maxton Hall).

Подписчикам по всему миру функция уже доступна для первого и второго сезонов. Для третьего сезона Prime Video планирует включить её одновременно с релизом 9 декабря. Компания намерена распространить технологию на другие проекты, но список и сроки не назвала.

Ограничения текущего запуска

Синхронизация меняет изображение под озвучку, а не создаёт сам дубляж: используется человеческая озвучка. Это отличает функцию от автоматического перевода реплик и ограничивает текущий запуск одним сериалом и одной языковой дорожкой.

В прошлом году Prime Video тестировала помощь ИИ при дубляже на английский и испанский в 12 фильмах и сериалах. Тот эксперимент касался дубляжа, тогда как нынешнее объявление отдельно описывает согласование движений губ с уже переведённой речью.