Яндекс представил технологию, не имеющую аналогов в мире, которая может переводить любое общедоступное видео с английской речью на русский язык.
Мгновенный перевод аудио дорожки в видео с английского на русский язык стал возможен благодаря технологии закадрового машинного перевода в связке с нейросетью.
Функция уже по умолчанию доступна в приложении Яндекс.Браузер для Android девайсов, Windows компьютеров и ноутбуков, а также на iOS и Mac OS.
Опция тестировалась более двух месяцев в бета-сборках на пользовательских устройствах и получилась настолько успешной, что уже сегодня можно слушать и смотреть ролики на английском языке с параллельным переводом на русский.
Нейросеть быстро распознаёт мужской или женский голос и мгновенно выдаёт перевод на русском. Женскую речь вы узнаете, ведь этот же голос используется в приложении Алиса.
Перевод накладывается на оригинальную аудио дорожку, которая слегка приглушается, чтобы пользователь мог слышать закадровый фон и другие звуки.
Нейросеть работает на всех известных операционных системах, собственно там, куда можно установить Яндекс.Браузер. Поддерживает следующие видеохостинги и потоковые видео-сервисы: Youtube, Vimeo, Twitter, Яндекс.Видео и некоторые другие.