Как ИИ оказывает реальную помощь: чат-бот с встроенным 3D-сурдопереводчиком

Некоммерческая организация и ИТ-компания «Сенсор-Тех» создала интеллектуального чат-бота с встроенным виртуальным сурдопереводчиком Дашей для инклюзивного центра «Теплый контакт», основными сотрудниками которого являются незрячие специалисты. «Наносемантика» выступила технологическим партнером проекта.

Лаборатория «Сенсор-Тех» разрабатывает программное обеспечение, создает технические устройства, а также вручную собирает уникальные приборы, которые помогают людям с серьезными сенсорными нарушениями ориентироваться в пространстве и легко контактировать в общественных местах.

Подписывайтесь на наш Telegram-канал, чтобы быть в курсе новостей мира технологий и искусственного интеллекта!

В рамках технологического партнерства Лаборатория «Сенсор-Тех» и «Наносемантика» решали задачу по созданию интеллектуального чат-бота с виджетом для сайта «Теплого контакта» с встроенным 3D-сурдопереводчиком, а также функциями переключения на видеоконференцсвязь (ВКС) и живого оператора.

Диалоговая платформа DialogOS

Чат-бот был создан на диалоговой платформе DialogOS от «Наносемантики», на которой работает коммуникативный ИИ многих передовых отечественных компаний-лидеров в своих отраслях. DialogOS предназначена для разработки и поддержки разговорных систем на основе ИИ, может работать на 40 языках и включает в себя огромную базу знаний, которая насчитывает 3611 диалоговых сценариев, 5230 специализированных словарей и более 3 миллионов адаптивных вопросов.

Более подробно о диалоговой платформе DialogOS читайте в нашем материале на vc.ru

Одна из задач чат-бота на сайте «Теплого контакта» ‒ это анкетирование пользователя. Глухой человек может зайти в виджет и вступить в диалог с чат-ботом, который задает разные вопросы: например, о доступности среды, социальной жизни и возможностях трудоустройства для людей с ОВЗ. Все свои текстовые вопросы и ответы чат-бот автоматически дублирует на жестовом языке. Также если глухой человек испытывает трудности в процессе опроса, он может обратиться к оператору: тот через программу экранного доступа может ему помочь и соединить с живым сурдопереводчиком.

Виртуальный сурдопереводчик Даша генерирует русский жестовый язык на основе введенного текста. Всё работает с помощью искусственного интеллекта, который был обучен на основе собранного датасета из более чем 50 тысяч жестов.

В тестировании чат-бота принимали участие более 500 человек ‒ это были глухие, слабослышащие, сурдопереводчики, сурдопедагоги. До конца анкеты дошло 87% аудитории, и это высокий показатель для данной аудитории.