"Яндекс" запустил функцию автоматического закадрового перевода англоязычных видео на своей платформе
Перевод происходит в несколько этапов. Сначала "Яндекс" распознает речь, превращает ее в текст и с помощью нейросетей разбивает на предложения. Потом определяет пол говорящего, переводит предложения на русский язык и синтезирует голос.
"Остается совместить перевод с видеорядом. Это совсем не тривиальная задача", - добавили в компании.
Так как в русском языке предложения длиннее, чем в английском. Здесь на помощь снова приходят нейросети.
Поэтому процесс перевода занимает несколько минут - для этого нужно поставить видео на паузу и подождать. Как только все будет готово, пользователю придет соответствующее уведомление.
В "Яндексе" добавили, что на YouTube, Vimeo и еще некоторых платформах практически любое видео на английском языке уже можно перевести. Перевод доступен в "Яндекс.Браузере" для macOS, Windows, Android, Linux и в приложении "Яндекс" для iOS и Android.