Meta* представила нейросеть SeamlessM4T, которая умеет распознавать речь и переводить её на 100 языков Статьи редакции
Модель может переводить с одного языка на другой и выдать результат в текстовом или аудиоварианте.
- SeamlessM4T — нейросеть, которая умеет распознавать речь, преобразовывать её в текст и переводить на около 100 языков. Также модель умеет создавать из текста речь на 35 языках.
- Нейросеть доступна для исследователей по лицензии с открытым исходным кодом, вместе с SeamlessAlign — набором данных для перевода, который содержит 270 часов записи речи и соответствующие ей тексты.
- SeamlessM4T может распознавать, когда человек переходит с одного языка на другой или использует в речи сразу несколько: например, телугу, хинди и английский.
- Модель основана на предыдущих проектах Meta* для переводов: например, системе прямого перевода между языками, ИИ-переводчике для диалекта хоккеин, у которого нет письменного варианта, и других.
*Meta признана экстремистской организацией и запрещена в России.
15K
показов
8.4K
открытий
4
репоста
Ну да, все же в речи используют телугу, хинди и английский по очереди.
Но молодцы, синтез речи, особенно качественный — круто.
Вообще довольно много ситуаций, когда это может быть полезно. Например, я когда говорю на английском, могу забыть какое-то слово. Если я проговорю его на русском и в этот момент переводчик показывжет мне его перевод в контексте моей речи, и я смогу его использовать, это будет довольно удобно.
Очередной и очевидный неизбежный шаг на пути к созданию роботов по образцу предсказанному Айзеком Азимовым.
У меня есть видео на английском, как его можно бесплатно перевести - с помощью этой штуки получится ?
Ну это в теории может быть полезно. На отдыхе может?
Как раз-таки смесь хинди и английского очень распространена у индийцев - они свободно переключаются между этими языками в разговоре между собой. Ру-инглиш тоже никто не отменял
Смотрю сколько кода выкладывает Meta в паблик по открытой лицензии и думаю, что не ту компанию назвали «OpenAI»)
Тот момент, когда хотел быть властелином метавселенной, а приходится плестить в хвосте разработчиков нейросетей.
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Комментарий удален модератором
Странно, а чего они ее просто не впилили в свой браузер, отгородив от всего мира? А, перепутал компании просто.
Комментарий недоступен
обычный индийский акцент. У меня engineering manager был с таким же акцентом - все понимали (и американцы, и сингапурцы, и европейцы)
другое дело лет ми спик фром май харт))
Хз, вроде понятно ) Бывает куда хуже
Все понятно там вроде. Занимайся больше.
ну здорово ,еще и 100 языков
Наконец то уже скоро появятся универсальные переводчики с Клингонского на Русский
Комментарий недоступен
Комментарий недоступен
Надо начинать не с телуги, а с белуги, тогда и хинди, и английский не станут проблемой
Facebook какой-то херней страдает
побольше бы такой херни
Русский есть?
Ты пост читал? Первое видео показывает именно перевод на русский.
Ммм, учитывая как инстаграм коряво переводит текст...
классная разработка ,а перевод не как у гугл переводчика ?
Так что встраиваем в google meet? или Whatsapp для синхронного перевода?
Полезно, как альтернатива переводчиком в плане изучения языков.
Лет через 5-10 перейдем на девайсы как в фантастических фильмах, которые будут все носить на шее/ухе и которые будут определять язык собеседника и переводить диалог в оба направления...
Нам нужна новая фантастика, так как большая часть технологий из этого жанра уже имеется ))
Комментарий недоступен
Значит больше нет необходимости учить языки
Комментарий недоступен
Сообщение удалено
Капец нейросети уже такие прошаренные стали, скоро и нас заменят (шутка))
Жалко что код на гитхабе нерабочий и попробовать нельзя.
Поражает насколько реальный прогресс в ИИ мог быть ещё круче, если бы последний год всем хватало нужной GPU мощности. Куча проектов движется гораздо медленнее чем могла бы.
Экстремистская нейросеть выходит ))
Наконец-то! Давайте уже пускать программу в массы и завязывать эту историю с изучением иностранных языков.
Комментарий недоступен