Пошук у записаному мовленні: трек SDR

У 1997–1999 роках NIST провів у TREC трек пошуку в записаному мовленні: системи розпізнавали випуски новин і шукали в розшифровці за запитами. Колекція виросла з 50 годин у 1997 році до 557 годин і 21 754 сюжетів у 1999-му. Підсумок NIST представив на RIAO 2000 у Парижі 12–14 квітня 2000 року.

TREC-6 (1997): 50 годин, 1 451 сюжет у середньому по 276 слів, пошук відомого сюжету; базовий розпізнавач IBM помилявся в 50 % слів, у середньому по сюжету — у 40 %. Тестові корпуси розпізнавання до того були коротші за три години. TREC-7 (1998): 87 годин, 2 866 сюжетів, звичайний пошук релевантних. TREC-8 (1999): 557 годин новин ABC, CNN, Public Radio International і «Голосу Америки» за лютий — червень 1998 року; базові розпізнавачі NIST — 27,5 % і 26,7 % помилкових слів. Груп-учасників було 13, 11 і 10. У TREC-8 системи вперше шукали й без розмічених меж сюжетів. Чого запис не стверджує: стаття не каже, що пошук у розпізнаному тексті дорівнює пошукові в людській розшифровці. Її застереження — питання-відповіді й усні запити, де одне хибне слово руйнує результат, ще не випробувано.