В интернете только и разговоров, что об AI... Мы не будем рассказывать о фичах и пользе искусственного интеллекта, вы всё знаете и без нас. Но мы хотим показать, какие сервисы используем в своем приложении по изучению иностранных языков. Итак, какие «должности» в Memo мы смело отдали машинам? Сейчас расскажем 😉
Привет, vc.ru, давно не виделись! В нашем приложении появилась отдельная лента с видео, где пользователь может тренировать аудирование и прокачивать свой английский. Да, теперь можно учить иностранный язык не только по мемам. Чтобы это стало возможным, мы подключили несколько сервисов, включая различные AI. Как вы поняли, слово AI в этом тексте будет встречаться часто, мы вас предупредили. Давайте обо всем по порядку.
Как формируется лента новых видео
Во главе всего стоит контент, поэтому изначально мы изучили и вручную собрали Instagram* профили, которые публикуют релевантный для нас видеоконтент. Здесь “ручная” работа заканчивается и начинается парсинг видео при помощи rapidapi. Раз в сутки мы проверяем reels у нужных профилей, и в случае, если у креаторов появилось что-то новое, скачиваем видео в нашу базу. Кстати, в приложении мы обязательно указываем все источники. А вот дальше мы обращаемся к всевозможным AI, потому что они здóрово облегчают жизнь нашей команде. Смотрите сами:
- После того как мы получили свежее видео, нам нужно распознать в нем речь. Для этого мы используем Video AI.
- Полученный текст из видео нам нужно разбить на предложения. Это мы делаем при помощи Natural Language AI.
- Далее предложения переводятся на поддерживаемые языки при помощи Translation AI.
- Последний шаг в подготовке видео – это разметка видео по уровню сложности языка, используемого в тексте. Мы размечаем согласно стандарту CEFR, а помогает нам в этом всеми любимый ChatGPT.
После того как мы подготовили видео, оно попадает в ленту приложения, но видят его только модераторы. И вот здесь мы уже никак не можем обойтись без нашей команды, поэтому снова начинается “ручная” работа.
Как происходит модерация контента
Все видео мы редактируем прямо в приложении Memo. Модераторы могут редактировать субтитры и их переводы, созданные с помощью AI, удалять в них ненужные строчки или, наоборот, добавлять недостающие. А еще менять таймкод каждой строчки, если вдруг субтитры съехали.
После каждого изменения в оригинальном тексте субтитров мы снова запускаем перевод нового текста с помощью Translation AI, а ChatGPT делает разметку уровня сложности языка. Когда модераторы исправили все ошибки и расставили недостающие символы, отредактированное видео отправляется в ленту пользователя.
Кстати, модераторы по желанию могут удалять видео, если посчитают его некачественным или неподходящим. Например, к “бракованному” контенту относятся длинные видео с наложенными песнями – такие reels могут быть интересными, но они никак не помогут в изучении языка. Иногда встречается брак по звуку или по размеру, такие видео мы тоже не берем в работу.
Как ещё мы используем технологии AI
Сейчас обучение в Memo построено на изучении слов (в ближайших планах – сделать доступным изучение целых предложений). Именно поэтому нам нужно знать не только перевод всего предложения, но и каждого отдельного слова. Чтобы это стало возможно, мы переводим все доступные слова во всех видео при помощи Translation AI.
Кстати, озвучка предложений и слов в Memo тоже есть, для этого мы используем сервис Speech-to-Text.
Что в итоге
Мы однозначно советуем отдать искусственному интеллекту рутинные и монотонные задачи, если есть такая возможность. Так вы перераспределите время и ресурсы на выполнение того, чего машины пока не могут. На наш взгляд, сейчас самый выгодный вариант использования AI – это синтез ручной и машинной работы.
Сегодня выбор AI огромен, каждый день изобретают что-то новое, так что вы наверняка найдете сервис, подходящий под ваш запрос. Но не забывайте проверять результаты, полученные с помощью ИИ, так как сервисы работают неидеально.
А какие рабочие задачки вы доверили искусственному интеллекту?
*Meta признана в России экстремистской организацией и запрещена на территории страны. Принадлежащие ей социальные сети Facebook и Instagram заблокированы в России.