«Яндекс» создал прототип закадрового перевода видео в «Браузере» Статьи редакции
Пользователи смогут смотреть видео на иностранном языке с русской озвучкой.
Благодаря технологии пользователи десктопного «Яндекс.Браузера» смогут смотреть ролики на иностранном языке с закадровым переводом, рассказали vc.ru в компании. Пока прототип работает только с видео на английском языке.
Над созданием прототипа работало несколько команд. В нём применяются технология распознавания и синтеза речи, разработки «Яндекс.Переводчика» и биометрия, которая позволяет определить пол говорящего и подобрать соответствующий голос.
Чтобы закадровый голос совпадал с картинкой, переводчик делает паузы, замедляет и ускоряет речь при необходимости. В оригинале и при переводе реплики часто не совпадают по длине, поэтому за темпом речи следит специальный алгоритм.
Компания продолжает работу над прототипом. Сейчас пользователи могут протестировать технологию на ограниченном списке видео, но в будущем смогут сами выбирать, какие ролики переводить.
В будущем «Яндекс» также планирует добавить поддержку перевода видео в свои мобильные приложения — «Яндекс.Браузера» и в приложение «Яндекс». Сроки запуска «полноценного» перевода в браузере в компании пока не говорят.
В интернете очень много полезного контента, который недоступен людям из-за языкового барьера. И мы близки к тому, чтобы окончательно стереть все границы. Яндекс.Браузер давно умеет переводить тексты, в этом году стал переводить изображения, перевод видео — следующий этап.
Это большая сложная задача, которую никто в мире еще не решил. Мы тоже в начале пути, но у нас уже есть прототип и понимание, куда двигаться дальше.
С одной стороны, ну вроде прогресс - понятно, что в итоге придём к автопереводу и при обычном человеческом общении.
С другой, учить языки (и вообще изучать новое) - лучшая тренировка для мозга. И люди ещё нескоро уйдут от идентификации «свой-чужой» по языку, а значит в определённых кругах необходимость знать хотя бы английский никуда не денется.
В конечном счете это ещё одна расслаивающая общество технология: «элита» продолжит изучать языки, как изучала (как создатели айфонов, онлайн кинотеатров и других доступных массовых развлечений сами ими не пользуются), а «плебс» будет втыкать в экран, только с ещё меньшими когнитивными усилиями. Печаль.
Учить языки прикольно. Мозг перестаёт считать свой язык единственно правильным. Появляются точки роста для улучшения родного языка. Понятийный аппарат улучшается. Понимание других людей улучшается и пропадает вот это свой-чужой. В той же локализации игр меня часто расстраивает шрифт для русского языка. Ведь "плебс" и так сожрёт.
Получаем: отсебятину, потерю игры слов, а также глубины. К примеру в игре в Detroit Become Human при обращении к роботам в оригинале используют местоимение it, т.е. неодушевленный предмет. Но, когда один из героев ссылается на робота используя "he" вся повестка меняется. На русский это нормально не переведёшь. Либо лепить дополнительный текст, что уже является адаптацией, тобишь отсебятиной.