«Яндекс» создал прототип закадрового перевода видео в «Браузере» Статьи редакции
Пользователи смогут смотреть видео на иностранном языке с русской озвучкой.
Благодаря технологии пользователи десктопного «Яндекс.Браузера» смогут смотреть ролики на иностранном языке с закадровым переводом, рассказали vc.ru в компании. Пока прототип работает только с видео на английском языке.
Над созданием прототипа работало несколько команд. В нём применяются технология распознавания и синтеза речи, разработки «Яндекс.Переводчика» и биометрия, которая позволяет определить пол говорящего и подобрать соответствующий голос.
Чтобы закадровый голос совпадал с картинкой, переводчик делает паузы, замедляет и ускоряет речь при необходимости. В оригинале и при переводе реплики часто не совпадают по длине, поэтому за темпом речи следит специальный алгоритм.
Компания продолжает работу над прототипом. Сейчас пользователи могут протестировать технологию на ограниченном списке видео, но в будущем смогут сами выбирать, какие ролики переводить.
В будущем «Яндекс» также планирует добавить поддержку перевода видео в свои мобильные приложения — «Яндекс.Браузера» и в приложение «Яндекс». Сроки запуска «полноценного» перевода в браузере в компании пока не говорят.
В интернете очень много полезного контента, который недоступен людям из-за языкового барьера. И мы близки к тому, чтобы окончательно стереть все границы. Яндекс.Браузер давно умеет переводить тексты, в этом году стал переводить изображения, перевод видео — следующий этап.
Это большая сложная задача, которую никто в мире еще не решил. Мы тоже в начале пути, но у нас уже есть прототип и понимание, куда двигаться дальше.
Отлично же! Всяко лучше чем субтитры
Нет, гораздо хуже. Например, шведы так хорошо говорят по-английски, потому что с детства смотрят фильмы без дубляжа (у них его не делают) в оригинале, но с субтитрами.
Учииь английский когда через 10 лет все будет переводится роботом,какой смысл?
Учить языки очень полезно для мозга. А еще видеть новые возможности в жизни и, не исключено, отсрочить Альцгеймера.
И еще раз: незнание английского закрывает гигантское количество дорог. Робот тут не поможет.
Немного запоздалый коммент, но все же хотелось бы сказать, что Альцгеймер через 10 лет тоже может стать неактуальным. Уже сейчас есть многообещающие наработки.
В интересное время живём.
https://www.massgeneral.org/news/press-release/Gene-therapy-using-zinc-fingers-may-help-treat-Alzheimers-disease-animal-study-shows