Как AI-виджет забрал ответы на вопросы учеников на себя и оптимизировал работу учителей на 21%: реальный кейс внедрения ИИ в EdTech

О возможностях ИИ рассказывают часто, но конкретными результатами делятся мало. Я хочу показать статистику, внутрянку и реакции студентов на внедрение ИИ в образовательную платформу. Вам будет полезно, если хотите сократить расходы на преподавателей, повысить SLA и ретеншн студентов.

Привет! В прошлом году мы запустили EvaHelp или «Ева, помоги!» — помощника на базе ИИ для образовательных проектов. За это время Еву внедрили в образовательный процесс: karpov.courses, ProductStar, Kodland, Careerum, Kampus и многие другие.

Со школой karpov.courses мы сотрудничаем с самого старта нашего продукта, и нам, наконец-то, удалось измерить и собрать результаты — ими и не терпится поделиться.

Ева — ИИ-помощник на базе ChatGPT. Мы создали ее, чтобы оптимизировать затраты на работу преподавателей в онлайн-школах. До Евы мы с товарищем работали в других EdTech-компаниях и видели, как много вопросов студенты задают преподавателям. И как много ресурсов нужно, чтобы их обработать.

Нашей гипотезой было то, что на вопросы может отвечать ChatGPT. Онлайн-школа оптимизирует ресурсы, а пользователи получают высокое качество обучения — помощник сможет отвечать в любое время и закрывать потребность в постоянной поддержке. Конечно же, в образовательном процессе есть куча нюансов , но мы пытались закрыть самый простой кейс «Не знаю как решить задание, помоги».

В школе есть два типа курсов — бесплатные и платные. На платных курсах ежемесячно обучаются больше трех тысяч студентов. И каждый из них может получить поддержку преподавателей. Преподаватели отвечали лично на каждый запрос.

Студентам бесплатных курсов тоже отвечали на запросы, но их было мало. Отправить вопрос можно было на почту или в Дискорд.

Количество обращений не фиксировали — собрали данные уже спустя год, чтобы сравнить с результатами после внедрения Евы.

karpov.courses — первопроходцы, одними из первых захотели внедрить наш продукт, им досталась самая первая версия Евы — «голая» модель ChatGPT в виджете. Не было ни личного кабинета, где можно настроить Еву, ни оценки ответов — ничего, только кусок кода, который им нужно было вставить себе на платформу, и худо-бедно нарисованный виджет.

Его раскатили на небольшую группу студентов. По откликам студентов стало ясно, что Ева помогает в обучении. Тогда один за другим руководители курсов попросили внедрить Еву в свои программы. Кстати, Еву можно настроить по-разному на разных курсах, под «настроить» я имею в виду задать ей системный промпт или подсказки для студентов перед открытием виджета.

Параллельно мы много думали о том, чтобы внедрить возможность дообучения Евы, чтобы ее можно было «зафреймить» своими знаниями. К этому мы пришли чуть позже, выкатив фичу загрузки своих собственных файлов в почти неограниченном размере, но конкретно школе Карпова это даже было не нужно, обычная chatgpt прекрасно себя показывала при решение вопросов по программированию и аналитике.

Ева выросла благодаря обратной связи от студентов, которой с нами регулярно делились. Мы видели, что студентам нравится, а что еще стоит доработать — допиливали продукт под конечного пользователя.

Большая часть студентов рада возможности получать ответы от Евы и позитивно оценила помощь.

Прямо в виджете студент ставит оценку ответу.

После оценки можно оставить развернутую обратную связь — рассказать, что у Евы получилось хорошо, а что не очень.

И руководители курсов смогут увидеть в кабинете долю дизлайков и даже что конкретно понравилось или не понравилось.

Я спросил, почему в школе Карпова так прижилась Ева. Казалось бы, ценность чат-бота должна быть ниже, чем ценность эксперта. Но не в нашем случае.

ИИ-помощника не скрывают — Ева есть в программах курсов, и ей посвящен отдельный раздел на сайте.

Застали блокировку OpenAI API для российских пользователей. Тогда мы, как можно быстрее, обеспечили стабильный доступ к OpenAI с помощью прокси-серверов. Прокси-сервера — это надежное решение, их стабильность мы можем поддерживать, несмотря на блокировки. Благодаря ним у Евы всегда есть доступ к последним обновлениям ChatGPT.

Ева перекрывала контент на мобильных устройствах и планшете. Еву нельзя было скрыть, и пользователи стали указывать на это в комментариях. Мы исправили виджет, и теперь Еву можно скрыть.

Но в целом всё прошло гладко, а Ева работала стабильно — об этом мы печемся больше всего.

Евой воспользовались 30 000+ студентов платных и бесплатных курсов. В результате внедрение Евы может повысить вовлеченность - на это мы влияем напрямую, так как студенты не уходят в сторонние сервисы, если что-то не получается, а остаются на платформе школы.

Преподаватели стали пользоваться Евой для создания контента. Благодаря Еве у преподавателей есть доступ к ChatGPT, для которого не нужны сервисы-посредники. Так что преподаватели тоже оптимизируют свою работу.

Интерес студентов к общению с ИИ вырос. Помимо бурного роста пользователей Евы интерес к ней видно еще и по конверсии в начало второй сессии в недельных когортах новых пользователей — она выросла с 31% летом 2023 до 52% летом 2024.

И точно так же это видно по времени перехода ко второй сессии общения с Евой — оно сильно уменьшилось, ученики все охотнее возвращаются к чат-боту за помощью. В сентябре 2023 года перерыв между первой и второй сессией составлял 1,72 дня. Сейчас же студенты переходят ко второй сессии через 0,89 дня. То есть, в два раза быстрее.

Эти и другие метрики вовлеченности можно посмотреть в личном кабинете после внедрения Евы.

Ну и самое главное -снизилось количество вопросов, которые закрывают преподаватели — на 21,35%. Переложите эти результаты на свой бизнес и поймете, насколько это может быть выгодно в деньгах.

За этот год мы улучшили Еву, и сейчас она может работать не только как голая GPT-модель:

Ева растёт и развивается с каждым новым клиентом — мы реагируем на запросы и добавляем нужные функции.

Подключение такое же простое, как интеграция фейсбук пикселя на сайт:

Плюс в том, что не нужно много ресурсов разработки — интегрировать Еву может и проджект менеджер.

Если остались вопросы, с радостью отвечу на демо — можно забронировать время в моем календаре.

Не очень системно, но пишем про ИИ в образовании и делимся апдейтами в продукте в Телеграм-канале «AI в образовании - Помоги мне, Ева!».