ИИ и Natural Language Processing: большой обзор рынка. Часть 2

Мы продолжаем цикл статей о том, как выглядит рынок Natural Language Processing. Сегодня в нашем обзоре — список самых влиятельных игроков и технологий мирового рынка NLP. Тем временем российские разработчики NLP-решений по-прежнему могут подать заявку на профильный конкурс Up Great и побороться за приз в 200 млн руб.

Продукты и проекты:

Google Ассистент позволяет общаться с Google как с живым человеком. Технология NLP анализирует предложения целиком, чтобы понять контекст и дать подходящий ответ на запрос пользователя.

Google Переводчик — бесплатный инструмент для перевода текста с одного языка на другой. Сервисом ежемесячно пользуются более 500 млн людей по всему миру, а в день Переводчик обрабатывает больше 100 млрд слов. Во время телефонного разговора технология распознавания речи превращает звуки в слова, а обработка естественных языков помогает компьютеру понять смысл речи.

Автоматическое создание субтитров для YouTube — с помощью машинного обучения YouTube автоматически создал субтитры более чем для 1 млрд видео на 10 языках.

Google Cloud ML APIs — набор уже обученных моделей для машинного обучения в виде готовых к использованию облачных сервисов, которые могут быть интегрированы с продуктами. Среди них есть и сервисы для NLP: Google Cloud Natural Language — сервис для глубокого анализа текстов. Позволяет делать синтаксический анализ, вычленять образы, анализировать эмоции и т.д.

Google Cloud AutoML Natural Language — позволяет создавать специализированные модели для категоризации текстовых данных на основе данных, не требуя при этом глубоких знаний в области NLP.

Dialogflow — комплексный пакет разработки для создания диалоговых интерфейсов для веб-сайтов, мобильных приложений, популярных платформ обмена сообщениями. Может быть использован для создания интерфейсов (таких как чат-боты и разговорный IVR, голосовые ассистенты), которые обеспечивают естественное и насыщенное взаимодействие между пользователями и бизнесом.

Продукты и проекты:

Cortana — голосовой помощник, работающий на Windows Phone 8.1, Microsoft Band, Windows 10, Android, Xbox One и iOS. На основе персональных данных предугадывает потребности пользователя, строит индивидуальные рекомендации, осуществляет поиск необходимой информации в интернете.

Luis (Language Understanding) — сервис обработки естественного языка на основе машинного обучения, встраиваемый в различные приложения, боты и устройства IoT. Может применяться как обычными, так и индустриальными пользователями.

Microsoft анализ текста — API для извлечения информации из текста, анализа тональности, определения языка текста, выделения ключевых слов и именованных сущностей.

Продукты и проекты:

Alexa — виртуальный помощник с алгоритмами обработки естественного языка.

Twinword — API для оценки сходства двух слов, предложений или абзацев, определения расстояния между частями текста и классификации текстов.

Amazon Comprehend — сервис обработки естественного языка (NLP), в котором для поиска закономерностей и взаимосвязей в тексте применяются технологии машинного обучения. Опыт в сфере машинного обучения не требуется.

Продукты и проекты:

Watson Natural Language Understanding — модели на основе IBM Watson, позволяющие выделять из текста понятия, сущности, ключевые слова, категории, настроения, эмоции, отношения и семантические роли.

Watson Speech-to-Text — система, позволяющая конвертировать аудиозаписи в написанный текст.

Watson Discovery — облачная технология, позволяющая при помощи комбинации алгоритмов машинного обучения и обработки естественного языка анализировать данные в рамках конкретной индустрии и выделять тенденции и тренды.

IBM Watson Explorer — набор моделей для поиска информации в тексте, выделения сущностей и отношений.

Watson Neural Machine Translation — технология машинного перевода на основе алгоритмов глубокого обучения, позволяющая осуществлять автоматический перевод с ряда европейских языков.

Project Debater — разговорный ИИ, который может общаться на различные темы, «понимает» вопросы и самостоятельно конструирует развернутые ответы на базе поиска вариантов ответов в Интернете.

Watson Beat — нейронная сеть, способная создавать оригинальные музыкальные композиции с использованием различных инструментов.

Продукты и проекты:

DuerOS — Разговорная ИИ-платформа, установлена более, чем на 100 миллионах устройств.

Raven H, Aladdin — голосовые помощники.

ERNIE 2.0 — фреймворк для понимания естественного языка, работает на английском и китайском языках, поддерживает логический вывод, определение семантического сходства, распознавание именованных сущностей, анализ тональности и сопоставление вопросов и ответов

Продукты и проекты:

Siri — виртуальный помощник и вопросно-ответная система с встроенной технологией обработки естественного языка, работающая на базе всех устройств Apple.

Платформа для обработки естественного языка — фреймворк для идентификации языка, токенизации, лемматизации, тегирования частей речи и распознавания именованных объектов.

Speech framework — фреймворк для распознавания произнесенных или записанных в аудиофайле слов. Алгоритмы распознавания речи используются для перевода аудиоконтента в текст.

SoundAnalysis — фреймворк для анализа и классификации аудиозаписей.

Speech Manager — встроенный в Mac OS алгоритм, который позволяет приложениям генерировать речь.

Продукты и проекты:

Cerence — новый спин-офф компании Nuance, специализирующийся на внедрении разговорных ИИ-платформ в транспортные средства.

Engagement of things — решение на основе разговорного ИИ и интернета вещей, объединяющее все электронные устройства пользователя в рамках единой платформы.

Nuance Healthcare Solutions — виртуальные ассистенты, системы распознавания речи и программное обеспечение для обработки документации, применяемые в медицинских учреждениях.

Dragon Drive — виртуальный помощник для автомобиля с функциями разговорного ИИ, биометрии, распознавания голоса и дополненной реальности.

Siri — система распознавания голоса, используемая в голосовом помощнике Siri (Apple, Inc.), была разработана Nuance.

Project Pathfinder — проект по машинному обучению, запущенный Nuance в начале 2019 г., направлен на усовершенствование алгоритмов, используемых в виртуальных агентах и чат-ботах. На основе логов чатов и транскриптов диалогов между агентами и пользователями Project Pathfinder строит более эффективные разговорные модели.

Nina — виртуальный помощник, интегрируемый в мобильные приложения на операционных системах iOS и Android, объединяет в себе технологии распознавания речи, преобразование текста в речь, систему голосовой биометрии. На базе Nina разработчики программного обеспечения могут создавать собственные системы распознавания голоса.

Продукты и проекты:

CommAI — разработка виртуальных агентов общего назначения, полезных для человека в повседневной жизни.

ParlAI — открытая платформа для обучения чат-ботов.

bAbI — платформа для автоматического понимания текстов, а также набор датасетов для тестирования алгоритмов понимания естественного языка.

FastText — фреймворк для классификации текста, выделения ключевых слов и именованных сущностей.

Продукты и проекты:

TingTing, Xiaowei — голосовые помощники, работающие на базе мессенджера WeChat.

Jingle — голосовой помощник, аналог Amazon Alexa.

Tencent NLP — открытая платформа с функциями семантического анализа, предоставляющая API для разработки NLP-систем и решения прикладных задач по обработке естественного языка.

Продукты и проекты:

DeepL Переводчик — бесплатная система машинного перевода. К середине 2019 г. доступны версии DeepL Переводчика на английском, немецком, французском, нидерландском, испанском, русском, итальянском, польском и португальском языках.

DeepL Pro — продукт, выпущенный в марте 2018 г., предлагает профессиональный API и расширенные возможности для онлайн-перевода. DeepL Pro представляет собой платформу, на основе которой разработчики могут создавать новые продукты: например, приложения для синхронного перевода видео и чартов, дополнения к браузеру и почтовым программам, а также переводчики в режиме дополненной реальности.

Linguee — глобальная система контекстуального поиска по переводам.

Продукты и проекты:

Tmall Genie — голосовой помощник.

AliReader — технология анализа неструктурированного текста, интеллектуального поиска и извлечения информации из различных документов, использующаяся во многих продуктах Alibaba.

AliTranx — переводчик, применяемый в Alibaba International B2B, AliExpress и платформе Lazada, ежедневно его используют более 700 млн человек.

Judicial brain — NLP-платформа для юристов.

AliNLP — NLP-система, использующаяся в различных продуктах Alibaba, более 800 млрд. использований в день.

Продолжение следует.

Текст подготовлен на основе исследования Frost&Sullivan в интересах Технологических конкурсов Up Great (организаторы — РВК, АСИ и Фонд "Сколково")