«Яндекс» добавил синхронный перевод прямых трансляций в «Браузере» — пока для нескольких YouTube-каналов Статьи редакции

Можно будет смотреть презентации Apple и запуски SpaceX сразу на русском.

  • Компания добавила технологию автоматического закадрового перевода прямых трансляций на YouTube в свой браузер, рассказали в «Яндексе». Пока она работает в режиме открытого бета-тестирования для нескольких каналов из списка, в том числе Apple, Google, TechCrunch, SpaceX, TED и других.
  • Технология позволяет переводить стримы с пяти языков — английского, немецкого, испанского, итальянского и французского. В ближайшее время компания планирует начать тестировать азиатские пары языков, но когда они будут доступны всем пользователям, не говорит.

Следующий шаг — перевод потоковых трансляций и видеороликов не только на YouTube, но и, например, в Twitch. Мы научили нейросети переводить трансляции на английском, немецком, французском, итальянском и испанском. Далее мы добавим новые пары европейских языков, а также китайский, японский и другие.

Дмитрий Тимко, руководитель приложения «Яндекс» и «Яндекс Браузера»
  • Запуск перевода стримов на Twitch требует много времени, отметили vc.ru в «Яндексе» — вероятно, это произойдет не раньше 2023 года.
  • Для запуска перевода стримов разработчикам пришлось перестроить всю архитектуру закадрового перевода видео, отметили в компании. При записанном ролике нейросеть получает аудиодорожку целиком, а значит, обладает полным контекстом, что облегчает задачу.
  • При прямой трансляции одна нейросеть распознает аудио и превращает его в текст, другая — определяет пол спикера по биометрии. Третья нейросеть расставляет знаки препинания и выделяет из текста смысловые фрагменты — части, которые содержат законченную мысль. Их забирает ещё одна нейросеть, отвечающая за перевод, который сразу синтезируется на русском языке.
  • «Яндекс» добавил автоматический закадровый перевод любых англоязычных видео в YouTube и других сервисах в «Браузере» в сентябре 2021 года, а в ноябре — закадровый перевод видео на французском, испанском и немецком. Ограничения действуют на лицензионный контент — например, сериал Netflix сервис не переведёт.
Понимает индийский английский и отличает Амазонку от Amazon

«Яндекс Браузер» запустил закадровый перевод прямых трансляций. Вот как работает технология, которой нет больше ни у кого в мире.

0
142 комментария
Написать комментарий...
Вадим Д.

Вот это круто! Яндекс пока всю неделю молодцы! На моей памяти — рекорд (-:
И это очень здорово, поскольку хорошие новости нужны, как воздух. Молодцы, так держать! 🤘🏻

Ответить
Развернуть ветку
Невероятный Блондин

Ну не при всех же.
Хоть бы уединились. 👉🏼👌🏼

Ответить
Развернуть ветку
Вадим Д.

Даже не пойму, что Вы такого углядели, чтобы такие выводы делать О_о.

Ответить
Развернуть ветку
Невероятный Блондин

Обращение на «вы» само по себе уважительное, и не требует написания с большой буквы.
К тому же, ко мне можно на «ты», мы не в парламенте, мы в комментах ))

Теперь к сути вопроса: просто ты их так яро нахваливаешь каждый раз, что аж брызги долетают. А между тем это всё та же компания что… (тут список всего говна) и забывать об этом нельзя ни в коем случае.

Ответить
Развернуть ветку
Вадим Д.

Забывать о дерьме нельзя, полностью согласен.
А почему бы не похвалить, если есть достижения? У всех есть, скажем так, тёмные пятна, у Вас в том числе. И после этого, несмотря на любые достижения и успехи все говно? Или предлагаете перечнями хвалить? Вот тут молодцы, но не забываем о том-то и этом, так что ли?
У Вас есть данные, что те, кто запилил этот синхронный перевод, сливали данные пользователей? Или они отвечают за, скажем так, спорные, новости?

Ответить
Развернуть ветку
Невероятный Блондин

Друг, я к тебе очень хорошо отношусь, поэтому не буду идти на конфронтацию с тобой.
Просто ты хвалишь, как бы это сказать, с усердием.

Говорю как выглядит.
Как другу.

Ответить
Развернуть ветку
Вадим Д.

Да я и не хочу конфликтовать (хотя друг, пожалуй слишком громко пока 😊).
Всё же достойные вещи можно и нужно достойно оценивать. А дерьмище – тоже оценивать адекватно и всячески порицать. Просто Яндекс настолько большая и разрозненная контора, что левая рука не то, что не знает что делает правая, но они просто не знают о существовании друг друга (-:

Ответить
Развернуть ветку
Артур Кожевников
Просто Яндекс настолько большая и разрозненная контора

Вы сейчас цитируете любимую присказку яндексоидов в моменты обострения самолюбования. На деле, судя по вики, там 12к человек всего. Даже у Тинькова 26к, а у Ростелекома 133к.

левая рука не то, что не знает что делает правая, но они просто не знают о существовании друг друга

Это, скорее, говорит о низком уровне менеджмента.

Ответить
Развернуть ветку
Вадим Д.

12к сотрудников, считаете, мало?
А со вторым согласен (-:

Ответить
Развернуть ветку
Артур Кожевников

Считаю, что это очень компактная компания относительно того, какой они стремятся выглядеть в глазах обывателей (а вы попались на их удочку), и если бы они были такими же большими как условный Ростелеком, то при их низком уровне менеджмента просто развалились бы.

Ответить
Развернуть ветку
Вадим Д.

Ну так понты – они такие, с реальностью не связаны (-:

Ответить
Развернуть ветку
Артур Кожевников

Вот поэтому ваши дифирамбы и смотрятся странно. О чем вам люди и пытались сказать.

Ответить
Развернуть ветку
139 комментариев
Раскрывать всегда