OpenAI Five обігрує чемпіонів Dota 2
13 квітня 2019 року OpenAI Five — програма OpenAI, що керує п'ятьма героями й навчена з підкріпленням, — виграла в команди OG, чинних чемпіонів світу з Dota 2, дві гри поспіль. Препринт 13 грудня 2019 року підсумував навчання: один безперервний прогін з 30 червня 2018 по 22 квітня 2019 року.
Чому це важливо
За словами OpenAI, це перша перемога програми над чемпіонами світу в кіберспортивній грі й перша над професіоналами в прямому ефірі. OpenAI пояснила результат не новим алгоритмом, а масштабом: наявний метод навчання з підкріпленням, розтягнений на десять місяців і сотні петафлопс-днів обчислень.
Автори визнали два обмеження гри: доступно 17 героїв зі 117 і вилучено предмети, що дають керувати кількома юнітами одночасно. 18–21 квітня 2019 року агента відкрили для всіх: 7 257 ігор проти 3 193 команд, 99,4 % перемог, але 3 140 із 7 215 перемог — ігри, які люди покинули, і їх зараховано як перемоги. Препринт дає 770 ± 50 петафлопс-днів і понад 150 мільйонів параметрів; квітневий реліз того самого виробника — 800 петафлопс-днів і близько 45 000 років гри із собою. Той самий реліз нагадує, що на The International 2018 OpenAI Five програла професіоналам.