«Яндекс» создал прототип закадрового перевода видео в «Браузере»

Пользователи смогут смотреть видео на иностранном языке с русской озвучкой.

Благодаря технологии пользователи десктопного «Яндекс.Браузера» смогут смотреть ролики на иностранном языке с закадровым переводом, рассказали vc.ru в компании. Пока прототип работает только с видео на английском языке.

Пример работы закадрового перевода видео «Яндекс»

Над созданием прототипа работало несколько команд. В нём применяются технология распознавания и синтеза речи, разработки «Яндекс.Переводчика» и биометрия, которая позволяет определить пол говорящего и подобрать соответствующий голос.

Чтобы закадровый голос совпадал с картинкой, переводчик делает паузы, замедляет и ускоряет речь при необходимости. В оригинале и при переводе реплики часто не совпадают по длине, поэтому за темпом речи следит специальный алгоритм.

Компания продолжает работу над прототипом. Сейчас пользователи могут протестировать технологию на ограниченном списке видео, но в будущем смогут сами выбирать, какие ролики переводить.

В будущем «Яндекс» также планирует добавить поддержку перевода видео в свои мобильные приложения — «Яндекс.Браузера» и в приложение «Яндекс». Сроки запуска «полноценного» перевода в браузере в компании пока не говорят.

В интернете очень много полезного контента, который недоступен людям из-за языкового барьера. И мы близки к тому, чтобы окончательно стереть все границы. Яндекс.Браузер давно умеет переводить тексты, в этом году стал переводить изображения, перевод видео — следующий этап.

Это большая сложная задача, которую никто в мире еще не решил. Мы тоже в начале пути, но у нас уже есть прототип и понимание, куда двигаться дальше.

Дэвид Талбот, руководитель направления обработки естественного языка в «Яндексе»
197197
289 комментариев

Почему нужно пихать все в один браузер? гугл же не пихает все свои сервисы. Яндекс браузер когда только появился нравился, привлек именно тем что ничего лишнего не было. Сейчас полный сбор мусора, удалил больше года назад везде. и рад. А этот сервис нужно сделать просто отдельным расширением для всех браузеров.

68
Ответить

Это вечное противостояние тех, кто хочет пустой браузер (которых вроде как хватает) и тех, кто хочет функциональный. Если взглянуть на комменты в блоге браузера, то, к примеру, переводчик текстов на картинках пользуется огого каким спросом. 

27
Ответить

Он никогда не был яндекс браузером. Он всегда был шкуркой на члене хромиума.

15
Ответить

Комментарий недоступен

8
Ответить

Что именно в яндекс браузере сбор мусора? Вопрос с подъебом, потому что на любой ваш ответ я отвечу, что это можно отключить в настройках, просто этого не делают, а вот яндекс хейтят

8
Ответить

В расширении рекламу не покажешь.

5
Ответить

Комментарий недоступен

5
Ответить