Яндекс представил интересный сервис для асессоров — Толока. Теперь любой желающий может принять участие в оценке качества поиска. Все, что для этого нужно — зарегистрироваться и выбрать задание из списка.
Типы заданий
На данный момент существует два типа заданий:
- Определение документов с контентом для взрослых.
- Оценка релевантности документов.
Пример задания
«Определите, может ли этот документ быть полезен пользователю, задавшему этот запрос»
Справа даны варианты ответов, из которых выбирает асессор. В помощь предлагается небольшая инструкция:
Мы считаем документ релевантным, если он в какой-то степени полезен пользователю, например:
- это именно тот сайт, который указан в запросе;
- это официальный сайт, если он помогает ответить на вопрос;
- этот документ дает хороший или нормальный ответ на запрос;
- этот документ относится к запросу, но предоставляет неполный, косвенный ответ или отвечает на второстепенную возможную трактовку запроса, но тем не менее имеет ненулевую ценность.
Оплата
За каждое выполненное задание асессор получает от 1 до 5 центов. Вознаграждение выплачивается на PayPal или Яндекс.Деньги в суммах от 10 долларов и выше.
Сам Яндекс описывает Толоку как сервис, где встречаются заказчики работы и исполнители. Заказчики размещают задания, связанные с анализом и оценкой контента. Пользователи оценивают. Отметим, что Яндекс никак не анонсировал данный сервис. Его обнаружили вебмастера, заметив на свои сайты переходы с сайта
https://toloka.yandex.com/pools.
Необычное название – Толока – означает давнюю балтославянскую традицию. Жители деревни объединялись, чтобы вместе сделать большое дело — собрать урожай, вырубить лес, построить дом или церковь. Такой же идеей руководствуется и Яндекс.