Сервис для асессоров — Толока

Яндекс представил интересный сервис для асессоров — Толока. Теперь любой желающий может принять участие в оценке качества поиска. Все, что для этого нужно — зарегистрироваться и выбрать задание из списка.

Типы заданий

На данный момент существует два типа заданий:

  1. Определение документов с контентом для взрослых.
  2. Оценка релевантности документов.

Пример задания

«Определите, может ли этот документ быть полезен пользователю, задавшему этот запрос»

Справа даны варианты ответов, из которых выбирает асессор. В помощь предлагается небольшая инструкция:

Мы считаем документ релевантным, если он в какой-то степени полезен пользователю, например:

  • это именно тот сайт, который указан в запросе;
  • это официальный сайт, если он помогает ответить на вопрос;
  • этот документ дает хороший или нормальный ответ на запрос;
  • этот документ относится к запросу, но предоставляет неполный, косвенный ответ или отвечает на второстепенную возможную трактовку запроса, но тем не менее имеет ненулевую ценность.

Оплата

За каждое выполненное задание асессор получает от 1 до 5 центов. Вознаграждение выплачивается на PayPal или Яндекс.Деньги в суммах от 10 долларов и выше.

Сам Яндекс описывает Толоку как сервис, где встречаются заказчики работы и исполнители. Заказчики размещают задания, связанные с анализом и оценкой контента. Пользователи оценивают. Отметим, что Яндекс никак не анонсировал данный сервис. Его обнаружили вебмастера, заметив на свои сайты переходы с сайта
https://toloka.yandex.com/pools.

Необычное название – Толока – означает давнюю балтославянскую традицию. Жители деревни объединялись, чтобы вместе сделать большое дело — собрать урожай, вырубить лес, построить дом или церковь. Такой же идеей руководствуется и Яндекс.

2014-11-26T19:08:55+00:00