Микроконвейер Яндекс Толока

Наиболее близким аналогом проекта «Купи работу» является сервис Яндекса «Толока». В нем тоже реализован принцип выбора заданий из списка, но там не аукционная система, а рейтинговая. Т.е. чтобы взять задание, нужно иметь рейтинг или обучиться какому-то навыку в категории, что логично при выбранной Яндексом модели микроконвейера.

Толока была изначально заточена под Яндекс и в основном там и сейчас задания Яндекса. Других заказчиков со стороны практически нет, потому что формат подготовки этих заданий чрезвычайно трудоемкий и сложный. Поэтому Яндекс в 2019-м году организовал у себя специальную службу, которая подготавливает задания стороннего заказчика в нужный для Толоки формат. Вот один из комментов о сервисе, который хорошо характеризует его для исполнителя:

«Alexandr Simonov

За несколько центов предлагается выполнить 5-10 несложных заданий между которыми по пол часа пути. Да и само задание может потребовать разгадки квеста в незнакомом здании. Ценообразование там сомнительное. Если мимо не шел, то ввязываться бессмысленно.»

Т.е. система, форматирующая исполнителя под конкретную задачу реально выносит мозг. Лично я считаю это огромным минусом. С ценой заданий (и с логикой ценообразования в зависимости от рейтинга) я бы может даже и согласился, если бы не было всех этих квестов с обучающими заданиями, тоннами инструкций, какими-то проверками, препятствиями, многоуровневыми условиями, чтобы наконец тебе разрешили приступить к работе.

Сразу понятно, что процессинг не может масштабироваться и этот косяк для Толоки фатальный. Заказчик не станет башлять Яндексу за помощь в создании квестов для того чтобы вписаться в формат системы выполнения, оценки и пр., а Яндекс на халяву тоже этого делать не будет. Т.е. Толока обречена остаться внутренним продуктом Яндекса навсегда.

Для самого Яндекса это может и нормально если у них все там так работает, но наружу это говно нельзя вываливать категорически. Собственно "успех" Толоки сам за себя говорит. В проекте «Купи работу», мы разработали другую систему формализации данных и подготовки заданий. Да, и в нашем проекте при подготовке заданий и инструкций к ним требуется формализм. Но этот формализм должен быть минимален и как система КОНЕЧЕН, как набор булевских функций. Он не должен пожрать сам себя, а именно это ждет Толоку, если она будет развиваться дальше в том же духе.

Навыки и рейтинги не должны быть непреодолимым препятствием для исполнителя на входе, и если задача требует очень высокого рейтинга и навыка, то такая задача должна дробиться на более мелкие, чтобы и эти 2 параметра автоматически снижались.

А Толока пошла по пути повышения уровня обучения исполнителей, а не атомизации задач. При этом стоимость выполнения задания для высокорейтинговых и низкорейтинговых отличается в 3 раза. Это вместо того чтобы сделать из одного задания 3 при той же суммарной стоимости. Но в том и порок Толоки, что они не могут пойти по этому пути, придется менять все устройство системы, всю его структуру. Нет механизма атомизации и формализации задач. Они формализуют и унифицируют навыки и рейтинги (читай мозги исполнителя) вместо этого, поэтому и получаются такие квесты.

Эта фундаментальная ошибка, даже не ошибка, этот выбор между двумя направлениями и не мог быть в Яндексе в пользу альтернативы. Потому что вся структура Яндекса в подходе к автоматизации управления человеческими ресурсами изначально развивалась в том же ключе, когда еще Толоки и в помине не было.

В Яндексе не знали, что управление макроконвейером и микроконвейером при переходе к такой детализации, отличаются принципиально, как отличается Ньютоновская и квантовая механика. Т.е. они тупо заехали с Ньютоновскими принципами в квантовую область. И даже сейчас не догоняют, что эти принципы там не работают.

Кстати, физики тоже долго не могли поверить и смириться, что квантовая механика работает иначе. На это им потребовалось 25 лет. Толока такой же технологический труп на рынке микроконвейеров задач, как планетарная модель атома Резерфорда-Бора в квантовой физике.

22 показа
1.9K1.9K открытий
61 комментарий

Толока успешно решает те задачи, которые ей ставят Яндекс и другие клиенты. Это всё, что нужно знать о толоке.

Ps. Тот факт, что толока не соответствует каким-то твоим фантазиям о ней, не означает ровным счётом ничего.

Pps. И на всякий случай: делать каждого исполнителя счастливым не является задачей толоки

Ответить

Успешно решает очень узкий класс задач при помощи очень узкой категории людей, способных проходить такие квесты.

Рассматривать толоку как продукт для массового рынка просто смешно.

Ответить

Толока была изначально заточена под Яндекс и в основном там и сейчас задания Яндекса. Других заказчиков со стороны практически нет, потому что формат подготовки этих заданий чрезвычайно трудоемкий и сложный. 

Что за бред. Успешно пользуюсь Толокой для разметки данных для ML-задач. Минимальных скиллов в программировании достаточно, что бы сформировать xlsx-файл с заданиями для Толоки

Ответить

"Успех" толоки сам за себя говорит.
Зареганных более 4-х миллионов, а активных даже сотни тысяч нет.

Если у вас задача очень подходит для размещения ее на толоке, то это частный случай и для обобщения не интересный.

Нельзя ограничивать исполнителя, он должен сам решать за какое задание браться. Аукцион в проекте "Купи работу" также является дополнительным ограничителем, покупать сложное дорогое задание или нет. В Толоке тебе просто не заплатят если накосячишь, а на аукционе это потеря вложенных в покупку задания средств. Но главное, что это ограничение не исходит от системы, оно рождается в самом исполнителе и это его выбор.

Ответить

Используем Толоку для обучения нейронных сетей и когда надо сделать огромное количество однотипных задач. Для этого Толока предназначена идеально. Буквально вчера выполнился пул из 10 000 задач для нас. Я не знаю еще одной системы, кто бы так организовал работу. 

Так что, если Толока не отвечает вашим фантазиям, то видимо это ваши проблемы

Ответить

Ваш класс задач это какая доля от всего рынка задач?
Толока не отвечает вашим фантазиям о емкости рынка. Ну, вы как маленький чесслово.
"надо сделать огромное количество однотипных задач."
Наймите программиста хорошего и пусть бот их делает.
На рынке 90% уникальных задач. Толока не может делать для них микроконвейеры. Они нерентабельны в ее модели.

Ответить

Как и любой сервис Яши это жесточайший демпинг и работа за еду

Ответить