«Яндекс» представил новую версию технологии перевода текста на изображениях на базе нейросетей

Переводчик лучше понимает стиль оригинального текста и игру слов на английском.

Разработчики создали отдельную модель семейства YandexGPT, адаптированную под задачи перевода с английского на русский, рассказали в «Яндексе». Обновление доступно в мобильных приложениях «Переводчика» и «Браузера» и в десктопном «Браузере». «Позже» появится в «Умной камере».
Модель понимает стиль оригинального текста и может сохранить игру слов. Также теперь переводчик подбирает более точные формулировки во фразах с несколькими значениями и не переводит выражения дословно.
Кроме того, компания улучшила визуализацию перевода для «нескольких десятков» языков. Технология стирает оригинальный текст с изображения и располагает переведённый поверх него.
Алгоритмы подбирают шрифт, размер и цвет букв и убирают артефакты, чтобы перевод на картинках выглядел естественно. Переводчик распознаёт переносы слов и может понять значение, даже если в кадре только часть слова.