Дослідження машинного навчання на грі в шашки

Семюель описав програму, що коригує оцінку позиції за результатами власних партій і грає сильніше за автора.

Чому це важливо

Тут уперше надруковано вислів «машинне навчання» — і показано, що програма може перевершити того, хто її написав.

Стаття описує два механізми: запам'ятовування оцінених позицій і корекцію ваг оцінної функції за різницею між оцінкою поточної та наступної позиції. Другий механізм відповідає тому, що згодом назвали навчанням за часовими різницями. Програма грала сама проти себе, щоб набрати досвід.

Відомості про подію

Дата події

липень 1959 р.

Дата на часовій осі

Дата події

Перевірка

Джерела зібрано автоматично · 17 вересня 2026 р.

Лінії

ID

evt-0088

Випуск IBM Journal of Research and Development за липень 1959 року.

Джерела

першоджерело Some studies in machine learning using the game of checkers
IBM Journal of Research and Development · Опубліковано липень 1959 р.
архівна копія Some Studies in Machine Learning Using the Game of Checkers (full text)
University of Virginia · Опубліковано липень 1959 р.

Пов’язані події

Раніше

Пов’язано Машина, що мутує власну програму 1958посилається на цей запис
Семюел 1959 року вчить програму, підбираючи коефіцієнти оцінки за результатами партій; Фрідберг 1958 року міняє самі інструкції за сигналом успіху. Обидві роботи вийшли в тому самому журналі; жодна не посилається на іншу в прочитаному.
Пов’язано Динамічне програмування 1957
Оновлення оцінки позиції за наступною позицією відповідає розкладанню Беллмана.
Розвиває Шашки Семюеля на телебаченні 1956
Стаття описує механізм навчання програми, показаної на телебаченні 1956 року.
- Some studies in machine learning using the game of checkers · IBM Journal of Research and Development

Пізніше

Розвиває Семюел: таблиці сигнатур 1967посилається на цей запис
Стаття має назву «Part II - Recent Progress» і продовжує роботу 1959 року: у списку літератури названо першу частину (IBM Journal 3, 211-229).
- A. L. Samuel, «Some Studies in Machine Learning Using the Game of Checkers. II - Recent Progress», IBM Journal of Research and Development 11(6), 601-617, November 1967 (DOI 10.1147/rd.116.0601) · International Business Machines Corporation (IBM Journal of Research and Development)
Спирається на Актор і критик 1983посилається на цей запис
Оновлення оцінки за різницею між послідовними станами походить від програми Семюеля.
- Neuronlike adaptive elements that can solve difficult learning control problems · IEEE Transactions on Systems, Man, and Cybernetics
Спирається на Навчання за часовими різницями 1988посилається на цей запис
Прямо зводить своє правило до того, що робила програма Семюеля в шашках.
- Learning to Predict by the Methods of Temporal Differences · Machine Learning
Пов’язано TD-Gammon 1992посилається на цей запис
Гра сама проти себе доведена до рівня, якого програма Семюеля не досягала.
Пов’язано Chinook стає чемпіоном світу 1994посилається на цей запис
Та сама гра, у якій Семюель починав, доведена до світового титулу.