Вопрос качества — один из ключевых, с которым сталкиваются специалисты по Data-science при постановке задачи по разметке данных. Во время работы с незнакомым исполнителем, работающим удалённо, невозможно угадать, кто возьмёт очередное задание. Достаточно ли он внимателен? Хорошо ли изучил инструкцию?
Сейчас на платформе Яндекс.Толока зарегистрировано более 8 млн исполнителей. Они выполняют около 13 млн заданий в день и тратят порядка 1,2 млн человеко-часов в месяц. При таких объёмах контролировать процессы вручную невозможно. Но в Толоке это можно делать автоматически на всех этапах разметки — от поиска исполнителей до обработки результатов.
Все благодаря многоступенчататой системе контроля, про которую команда Толоки поделилась в своей колонке https://clck.ru/R2wcd
Сейчас на платформе Яндекс.Толока зарегистрировано более 8 млн исполнителей. Они выполняют около 13 млн заданий в день и тратят порядка 1,2 млн человеко-часов в месяц. При таких объёмах контролировать процессы вручную невозможно. Но в Толоке это можно делать автоматически на всех этапах разметки — от поиска исполнителей до обработки результатов.
Все благодаря многоступенчататой системе контроля, про которую команда Толоки поделилась в своей колонке https://clck.ru/R2wcd