Искусcтвенный интеллект - способ спасения языка? Опыт Исландии

На исландском языке в мире говорят всего около 350 тыс. человек (в основном, сами жители Исландии). Эта страна, известная своей динамичной технологической отраслью и растущим туризмом, сталкивается сейчас с риском исчезновения своего родного языка из-за интеграции с Европой и Соединенными Штатами. Чтобы решить эту проблему, Исландия запустила сотрудничество с компанией OpenAI для использования языковой модели GPT-4 в сохранении исландского языка.

Изначально GPT-4 генерировала текст на исландском языке с грамматическими ошибками и неправильными культурными знаниями. Чтобы исправить это, команда из 40 добровольцев обучила GPT-4 правильной исландской грамматике и особенностям, связанным с культурой. Они использовали обучение с подкреплением от обратной связи человека (RLHF, Reinforcement Learning from Human Feedback). Тестеры из Исландии обучали модель более точным и подходящим ответам путем предоставления обратной связи в форме подсказок и выбора наилучшего варианта из ответов GPT-4.

Ранее настройка моделей для исландского языка требовала большого количества труда и значительного объема данных. Однако с помощью обучения с подкреплением от обратной связи человека можно достичь результатов уже с помощью 100 примеров, что делает процесс более выполнимым.

Этот продолжающийся сейчас проект позволяет не только обучить GPT-4 исландскому языку, но и обеспечит возможность всей стране взаимодействовать с моделями OpenAI на своем собственном языке. Партнерство между Исландией и OpenAI демонстрирует приверженность сохранению языка, культуры и истории с использованием искусственного интеллекта. Используя возможности GPT-4, Исландия стремится обеспечить выживание исландского языка в цифровую эпоху. Кроме того, такой проект послужит образцом для использования моделей искусственного интеллекта для сохранения других "маленьких" языков, для которых имеются лишь ограниченные цифровые языковые данные.

(источник: openai.com)

_____

Автор: создатель и автор телеграм-канала "Изучение языков с ChatGPT". (На канале - подробные инструкции, лайфхаки, техники, советы по изучению иностранных языков с помощью ChatGPT).

_____