Prime Video добавляет ИИ-синхронизацию губ для английского дубляжа
Функция подстраивает движения губ под переводную речь и пока работает на английской дорожке сериала «Макстон-холл». Prime Video уже включила её для первых двух сезонов по всему миру.
Как устроена функция
Amazon Prime Video представила функцию, которая подстраивает движения губ актёров под дубляж на другом языке. Сервис сочетает ИИ и визуальные эффекты, чтобы артикуляция совпадала с переводной речью. Пока технология работает только на английской звуковой дорожке немецкого сериала «Макстон-холл» (Maxton Hall).
Подписчикам по всему миру функция уже доступна для первого и второго сезонов. Для третьего сезона Prime Video планирует включить её одновременно с релизом 9 декабря. Компания намерена распространить технологию на другие проекты, но список и сроки не назвала.
Ограничения текущего запуска
Синхронизация меняет изображение под озвучку, а не создаёт сам дубляж: используется человеческая озвучка. Это отличает функцию от автоматического перевода реплик и ограничивает текущий запуск одним сериалом и одной языковой дорожкой.
В прошлом году Prime Video тестировала помощь ИИ при дубляже на английский и испанский в 12 фильмах и сериалах. Тот эксперимент касался дубляжа, тогда как нынешнее объявление отдельно описывает согласование движений губ с уже переведённой речью.