GPT-2
OpenAI опублікувала опис GPT-2.
Чому це важливо
Ця робота показала, як великий Transformer може генерувати продовження за підказкою.
Публікація OpenAI також обговорює ризики випуску та поетапне поширення.
Запис атласу: https://www.aitimeline.dev/uk/events/evt-0013/
Дослідження · лютий 2019 р.
Відомості про подію
- Дата події
- лютий 2019 р.
- Дата на часовій осі
- Дата події
- Перевірка
- Джерела зібрано автоматично · 11 вересня 2026 р.
- Лінії
- ID
- evt-0013
Джерела
- першоджерело GPT-2
OpenAI · Опубліковано лютий 2019 р.
- першоджерело Language Models are Unsupervised Multitask Learners (Radford, Wu, Child, Luan, Amodei, Sutskever), OpenAI technical report
OpenAI
Пов’язані події
Раніше
- Пов’язано Каліфорнія: бот мусить назватися ботом 2018посилається на цей запис
Закон ухвалено за п'ять місяців до опису GPT-2 і написано про автоматизовані акаунти, а не про мовні моделі; вимога розкриття стосується й бота, що працює на такій моделі.
- Уможливлює GPT-1 2018посилається на цей запис
Прямий попередник GPT-2, що вийшов за вісім місяців.
- Спирається на Transformer 2017
Технічний опис GPT-2 вказує на мовне моделювання з архітектурою Transformer.
- GPT-2 · OpenAI
Пізніше
- Пов’язано Закони масштабування 2020посилається на цей запис
Дослідження вимірювало моделі тієї самої архітектурної родини.
- Розвиває GPT-3 2020посилається на цей запис
Та сама архітектура, збільшена в сто разів.
- Пов’язано ChatGPT 2022посилається на цей запис
Асистент спирається на лінійку мовних моделей GPT.
- Пов’язано gpt-oss 2025посилається на цей запис
Перші відкриті ваги компанії від часів GPT-2 у 2019 році.