«Яндекс Браузер» добавил автоматический перевод видео с китайского языка Статьи редакции
Пока технология работает с видео на YouTube.
- «Яндекс» научил нейросети переводить видео с китайского и автоматически накладывать русскую озвучку, рассказала компания. В пресс-службе отметили, что теперь есть «достаточная технологическая база» для работы с другими сложными языками — например, корейским и японским.
- Чтобы научить нейросети, разработчики обработали 1,5 млн видео с помощью специального алгоритма и выбрали 100 тысяч примеров с качественными субтитрами на севернокитайском языке. Соответствие аудио и субтитров важно, потому что по ним нейросеть учится понимать речь, пояснили в компании.
- На первом этапе перевода нейросети выучили 6500 иероглифов, каждый из которых читается как слог. Чтобы нейросеть научилась их понимать, разработчики закодировали необходимый для работы с китайским словарь в виде 10 тысяч токенов. Один токен равен одному слогу или сочетанию двух слогов. Также нейросеть обучили делить сплошной поток иероглифов на смысловые отрезки, чтобы точнее синхронизировать перевод с речью.
- Также разработчики обучили нейросети понимать четыре тона, которые в китайском определяют смысл сказанного. Тон — это мелодический рисунок голоса, каждый слог с повышением или понижением голоса может означать разные вещи.
- «Яндекс Браузер» сам предложит перевести видео с китайского на YouTube после того, как пользователь его откроет. Для этого ему нужно нажать кнопку «Перевести видео». «Чуть позже» компания добавит перевод для китайской видеоплатформы Bilibili.
- «Яндекс» добавил автоматический закадровый перевод любых англоязычных видео в YouTube и других сервисах в «Браузере» в сентябре 2021 года, а в ноябре — закадровый перевод видео на французском, испанском и немецком. В августе 2022-го — синхронный перевод прямых трансляций.
55K
показов
16K
открытий
2
репоста
Комментарий недоступен
Сам-то небось учил английский, как язык других хозяев?
Английский бизнес язык номер 1 в мире, так же язык науки и туризма например. Даже с китайскими поставщиками на английском разговариваю. А вот нах китайский за пределами Китая вообще не понятно.
Следует из этого что американцы хозяева Руси и Китая?
Я бы не стал говорить именно так. Просто, когда на планете есть лидирующая держава - то она задаёт законы и моду. Когда была Византия великой империей - мы от них переняли религию, язык и (о, боже!) даже имена! Сейчас США правит балом и мы учим их язык. И, вот-вот, уже Китай скоро станет первой державой на планете и, похоже, что нашим детям придётся тренировать музыкальный слух, чтобы "нормально общаться"
Сомневаюсь что Китай станет первой державой.
Американцы и союзники сейчас им плотно закрывают доступ к технологиям и переносят производства из Китая. Скорее всего вторыми так и останутся, если их конечно со временем Индия не обгонит.
То есть Киевская Русь говорила на византийском? Что?!
ок. прочитайте с какого комента начался эта ветка.