Личный опыт
Tom Livne
2893

Как израильский стартап создает субтитры для Udacity

Как СЕО AI-компании Verbit, которая занимается транскрибированием аудио- и видеозаписей и созданием субтитров — делюсь опытом сотрудничества с одной из лидирующих образовательных платформ в мире.

В закладки

По данным исследования Global MOOCs Market 2018-2022, среднегодовой темп роста рынка онлайн-образования составит 30% за период 2018-2022 годов. Всё больше людей выбирают онлайн-курсы как возможность получить новую профессию или повысить квалификацию.

Образовательным платформам необходимо создавать субтитры к видеолекциям как можно быстрее и при этом обеспечить высокую точность текстов. Онлайн-провайдеры ищут оптимальные способы транскрибирования, способные снизить расходы. Одна из таких платформ, Udacity, стала клиентом нашей компании Verbit, создавшей высокоточную ИИ-технологию транскрибирования. Рассмотрим цели и результаты сотрудничества.

Как работают MOOC-платформы — на примере Udacity

Платформы, которые размещают у себя онлайн-курсы и дают к ним доступ аудитории, называют термином MOOC (massive open online course). Самые известные примеры таких проектов — Coursera, Udacity, edX, Khan Academy.

Большинство MOOC-платформ работает по модели freemium — базовый функционал предоставляется бесплатно, а за дополнительные опции — за деньги. Платными могут быть отдельные курсы, сертификаты и дипломы, «ручная» проверка домашних заданий, общение с лекторами и кураторами. При такой модели компаниям нужно повышать скорость и снижать затраты на производство, не теряя в качестве. Именно такую задачу мы решали вместе с Udacity.

Udacity — это провайдер онлайн-образования, созданный в 2012 году. Кофаундер Udacity — бывший профессор Стэнфордского университета Себастьян Трун, эксперт в области робототехники, участвовавший в создании Google X и разработке беспилотных автомобилей.

Udacity совместно с профильными компаниями (от Kaggle и Google до Mercedes) разрабатывает и предоставляет бесплатные курсы, которые учат программировать, разбираться в VR, data science и диджитал-маркетинге, запускать стартапы. В фокусе — бизнес и технологии.

В 2014 году Udacity столкнулась с тем, что курсы заканчивает только 10% записавшихся студентов. Чтобы их удержать, компания запустила «нанодипломы» по востребованным на рынке направлениям. Сейчас их пять — Data Science, AI, программирование, бизнес и самоуправляемые (автономные) системы. Программы nanodegree платные, но дипломы при устройстве на работу принимают гиганты рынка, включая Google и Cloudera.

Курсы Udacity — англоязычные. Они разделены на видеоуроки с субтитрами, к каждой лекции прилагается задание, которое может проверить преподаватель. Успешно прошедший курс студент по итогам финального тестирования получает онлайн-сертификат. Сейчас на платформе более 10 млн учеников из 190 стран мира. Компания заявляет, что ее основной приоритет — успех студентов.

Почему онлайн-курсам нужно ИИ-транскрибирование

В случае Udacity главными требованиями к подготовке субтитров были точность, масштабируемость и скорость подготовки. Платформе нужно, чтобы курсы были доступны максимально широкой аудитории, включая людей, которые не являются носителями английского языка, плохо воспринимают аудио или испытывают проблемы со слухом. А значит, точность и корректность субтитров — на первом месте.

Так как на платформе каждую неделю появляется более 20 часов новых видеоуроков, для которых нужны субтитры, Udacity также важна скорость транскрибирования.

Платформа работает с миллионами студентов по всему миру, поэтому курсы Udacity должны отвечать высоким стандартам качества и быть доступными на различных носителях. В компании стремились минимизировать затраты на транскрибирование видео и при этом обеспечить точность субтитров и удобство их чтения.

О решении, предоставляемом Verbit, узнала Кимберли Драйден, бывшая тогда главой видеодепартамента Udacity. Сначала Драйден отнеслась к платформе скептически — она раньше сталкивалась с машинным транскрибированием, и результаты не впечатляли. Однако компании нужен был новый провайдер субтитров — качество работы предыдущего оставляло желать лучшего. Поэтому Драйден решила рискнуть.

Машинная расшифровка в онлайн-образовании

В 2016 году мы запустили Verbit, чтобы упростить процесс транскрибирования и подготовки субтитров. У компании есть офисы в трех странах — Израиле (Тель-Авив), США (Нью-Йорк) и Украине (Киев). В киевском отделении работают специалисты по машинному обучению, которые ответственны за развитие нейросети, а также программисты, HR и тестировщик.

В решении мы комбинируем возможности машинного и человеческого интеллекта, так как полностью автоматизированное транскрибирование пока дает не более чем 90% точность.

Для перевода аудио- и видеоматериалов в текст мы используем нейросеть, которая постоянно обучается. Упрощенно работу deep learning алгоритмов можно представить так: нейросеть получает аудиозапись, разделяет ее на маленькие фрагменты и «переводит» их в буквы, которые затем старается составить в слова и словосочетания. Соответствий может быть много. Машина выбирает самые вероятные буквенные комбинации, основываясь на своем «словарном запасе». Допустим, если она слышит слово «образов(?)ние», вариантов может быть несколько. Например, «образование» или «образовение». Первый вариант более вероятен, поэтому алгоритм предпочтет его.

Наша нейросеть натренирована различать специфические термины, которые встречаются в онлайн-курсах. Но не всегда ИИ делает правильный выбор. Чтобы избежать ошибок, результаты работы нейросети проверяют профессиональные корректоры, с которыми мы сотрудничаем. Таким образом нам удается добиться 99% точности.

Работая с командой Udacity, мы интегрировали платформу Verbit в их CMS, чтобы специалисты по контенту могли получать субтитры в один клик.

Среди требований Udacity была не только точность, но и сжатые сроки выполнения транскрибирования — не более 5 рабочих дней для каждого курса. Сочетая подходы, мы справляемся с этими задачами в три раза быстрее, чем ожидалось. Затраты платформы на подготовку субтитров снизились на 20%. Компания отметила, что вместе мы смогли сохранить ее ключевые ценности — приоритет студентов и доступность высшего образования для всех.

Субтитры или транскрибирование аудиозаписей нужны не только в образовательной сфере. Технологию можно использовать в маркетинге, юриспруденции, страховании и медицине.

Материал опубликован пользователем.
Нажмите кнопку «Написать», чтобы поделиться мнением или рассказать о своём проекте.

Написать
{ "author_name": "Tom Livne", "author_type": "self", "tags": [], "comments": 0, "likes": 6, "favorites": 6, "is_advertisement": false, "subsite_label": "life", "id": 59502, "is_wide": false, "is_ugc": true, "date": "Tue, 26 Feb 2019 14:31:53 +0300", "is_special": false }
0
{ "id": 59502, "author_id": 260669, "diff_limit": 1000, "urls": {"diff":"\/comments\/59502\/get","add":"\/comments\/59502\/add","edit":"\/comments\/edit","remove":"\/admin\/comments\/remove","pin":"\/admin\/comments\/pin","get4edit":"\/comments\/get4edit","complain":"\/comments\/complain","load_more":"\/comments\/loading\/59502"}, "attach_limit": 2, "max_comment_text_length": 5000, "subsite_id": 199123, "last_count_and_date": null }
Комментариев нет
Популярные
По порядку
{ "page_type": "article" }

Прямой эфир

[ { "id": 1, "label": "100%×150_Branding_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox_method": "createAdaptive", "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "ezfl" } } }, { "id": 2, "label": "1200х400", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "ezfn" } } }, { "id": 3, "label": "240х200 _ТГБ_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fizc" } } }, { "id": 4, "label": "Article Branding", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "p1": "cfovx", "p2": "glug" } } }, { "id": 5, "label": "300x500_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "ezfk" } } }, { "id": 6, "label": "1180х250_Interpool_баннер над комментариями_Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "bugf", "p2": "ffyh" } } }, { "id": 7, "label": "Article Footer 100%_desktop_mobile", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fjxb" } } }, { "id": 8, "label": "Fullscreen Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fjoh" } } }, { "id": 9, "label": "Fullscreen Mobile", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fjog" } } }, { "id": 10, "disable": true, "label": "Native Partner Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyb" } } }, { "id": 11, "disable": true, "label": "Native Partner Mobile", "provider": "adfox", "adaptive": [ "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyc" } } }, { "id": 12, "label": "Кнопка в шапке", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "p1": "bscsh", "p2": "fdhx" } } }, { "id": 13, "label": "DM InPage Video PartnerCode", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox_method": "createAdaptive", "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "bugf", "p2": "flvn" } } }, { "id": 14, "label": "Yandex context video banner", "provider": "yandex", "yandex": { "block_id": "VI-223676-0", "render_to": "inpage_VI-223676-0-1104503429", "adfox_url": "//ads.adfox.ru/228129/getCode?pp=h&ps=bugf&p2=fpjw&puid1=&puid2=&puid3=&puid4=&puid8=&puid9=&puid10=&puid21=&puid22=&puid31=&puid32=&puid33=&fmt=1&dl={REFERER}&pr=" } }, { "id": 15, "label": "Баннер в ленте на главной", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "p1": "byudx", "p2": "ftjf" } } }, { "id": 16, "label": "Кнопка в шапке мобайл", "provider": "adfox", "adaptive": [ "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "p1": "byzqf", "p2": "ftwx" } } }, { "id": 17, "label": "Stratum Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fzvb" } } }, { "id": 18, "label": "Stratum Mobile", "provider": "adfox", "adaptive": [ "tablet", "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "bugf", "p2": "fzvc" } } }, { "id": 19, "disable": true, "label": "Тизер на главной", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "p1": "cbltd", "p2": "gazs" } } }, { "id": 20, "label": "Кнопка в сайдбаре", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "p1": "cgxmr", "p2": "gnwc" } } } ] { "page_type": "default" }