Этим летом Яндекс начал тестировать технологию машинного перевода видео. Чтобы показать, как она работает, они перевели с её помощью несколько роликов и собрали их в плейлист. Сегодня — следующий шаг: Яндекс открывает технологию для массового использования. Теперь вы можете посмотреть с русской озвучкой практически любой англоязычный ролик, какой захотите.
Переводить можно ролики, размещённые на YouTube, Vimeo и ещё нескольких популярных платформах. Главное, чтобы видео находилось в общем доступе.
Перевод роликов происходит в несколько этапов: распознавание речи, превращение её в текст и с помощью нейросетей разбивка её на предложения. Затем алгоритмы определяют пол говорящего, переводят предложения на русский язык и синтезируют голос, после чего совмещают перевод с видеорядом
Перевод работает на компьютерах — в Яндекс.Браузере и на мобильных устройствах: в Браузере для Android и приложении Яндекс для Android и iOS.
Yandex не планирует останавливаться на достигнутом. В ближайших планах — освоить новые языковые пары и добавить в перевод больше голосов.
