PyTorch
Facebook випустила бібліотеку, у якій граф обчислень будується на ходу, тож модель можна налагоджувати звичайними засобами мови.
Чому це важливо
Дослідникам повернули можливість писати експеримент як звичайну програму — і поле перейшло на цей інструмент за три роки.
TensorFlow вимагав описати граф повністю, а потім запустити, і помилка в описі виявлялася далеко від місця, де її зробили. PyTorch виконує операції одразу, тож працюють звичайні відлагоджувачі й друк проміжних значень. Для дослідницької роботи, де модель змінюють щодня, це виявилося вирішальним. До 2020 року більшість статей на головних конференціях використовували PyTorch.