ESP Game: мітки до зображень як гра
Луїс фон Ан і Лора Дабіш з Карнеґі-Меллон виклали гру ESP 9 серпня 2003 року: двоє незнайомих гравців бачать одне зображення й виграють, коли напишуть однакове слово. До 10 грудня 13 630 гравців дали 1 271 451 мітку для 293 760 зображень. Статтю представлено на CHI 2004 25 квітня 2004 року.
Чому це важливо
Розмітку зображень, якої не вмів робити комп'ютерний зір і яка коштувала дорого як праця, отримали з гри: слово, на якому погодилися двоє, ставало міткою. Набір ESP потім був мірилом, з яким порівнював себе ImageNet.
Пара гравців давала в середньому 3,89 мітки за хвилину; за оцінкою авторів, 5 000 людей, що грають цілодобово, дали б по мітці всім 425 мільйонам зображень Google за 31 день, а по шість слів — за пів року. Узгоджені слова ставали «табу» для наступних пар, до шести на зображення. Понад 80 % гравців поверталися, 33 зіграли понад 1 000 ігор. У перевірці 15 людей, що не грали, у середньому 5,105 з шести міток визнали корисними й 0,105 — зайвими. Запис не стверджує зв'язку ESP з Mechanical Turk: стаття його не згадує.