Как мы отказались от краудсорсинговой разметки данных для ИИ и сэкономили 30% бюджета
Руководитель группы аналитики Naumen Ника Чалова рассказывает, почему проектной команде не подошли краудсорсинговые сервисы разметки данных и как организовать работу асессоров в штате, чтобы проекты и команда не простаивали.
А вариант с отправкой ассесорам вопросов с заранее известными ответами не подошёл? Обычно же рекомендуют подмешивать часть вопросов из золотого стандарта, чтобы оценивать по ним корректность остальных ответов. Любопытно почему не сработал этот подход
Вопрос об этапе постановки задачи на краудсорсинговой платформе? Если да, то эталонные примеры всегда были и есть в постановке задачи ассессорам.