OpenAI Five

Gesloten gewichten OpenAI 159M parameters December 2019

Geen schatting

Geen hardware-eisen voor dit model

De gewichten voor dit model zijn niet gepubliceerd, dus het kan niet worden gedownload of uitgevoerd op je eigen hardware in welke grootte dan ook. Het is alleen bereikbaar via de aanbieder, en geen enkele grafische kaart verandert dat..

Op record

Volledige specificatie

Alles wat geregistreerd is voor dit model. Het merendeel beschrijft hoe het getraind werd in plaats van hoe het draait - nuttige context om te beoordelen hoeveel werk erin is gestoken, en hoe het zich verhoudt tot modellen die op een andere schaal zijn gebouwd..

Oorsprong

Wie heeft dit model gebouwd, waar, en wanneer het gepubliceerd werd.

Organisatie
OpenAI
Organisatietype
Industry
Land
United States of America
Gepubliceerd
13 December 2019
Auteurs
Christopher Berner, Greg Brockman, Brooke Chan, Vicki Cheung, Przemysław Dębiak, Christy Dennison, David Farhi, Quirin Fischer, Shariq Hashme, Chris Hesse, Rafal Józefowicz, Scott Gray, Catherine Olsson, Jakub Pachocki, Michael Petrov, Henrique P. d.O. Pinto, Jonathan Raiman, Tim Salimans, Jeremy Schlatter, Jonas Schneider, Szymon Sidor, Ilya Sutskever, Jie Tang, Filip Wolski, Susan Zhang

Wat het doet

De probleemgebieden waarvoor het model is gebouwd. Een model kan meerdere van elk bevatten.

Domein
Games
Taak
Dota 2
Aanpak
Self-supervised learning

Grootte

Hoe groot het model is en hoeveel data het is getraind. Parameters zijn het cijfer dat bepaalt of het past op een gegeven grafische kaart.

parameters
159M

"We define a policy (π) as a function from the history of observations to a probability distribution over actions, which we parameterize as a recurrent neural network with approximately 159 million parameters (θ)." pg. 3 of paper source: https://docs.google.com/spreadsheets/d/1Kj4Q5WADcDXtUJLIOfGTCE3tGvxNczEMwyy8QtgSkHk/edit#gid=54587040&fvid=1361937389

Training gegevens
454,164,480,000 tokens

"Although the Dota 2 engine runs at 30 frames per second, OpenAI Five only acts on every 4th frame which we call a timestep" --> 7.5 timesteps/s "OpenAI Five is a single training run that ran from June 30th, 2018 to April 22nd, 2019. " --> 296 days 296 * 24*3600 * 7.5 = 1.92e8 This number seems a little low? The DQN paper had 1e7 timesteps. Might be to do with sample efficiency? EDIT 14/06/2022 Multiple copies of OpenAI Five were trained in parallel, so the total training time is much higher…

Training rekenen

De berekeningen uitgevoerd om het model te trainen, gemeten in drijvende-komma-operaties. Het is een maat voor wat de trainingsrun kostte, niet voor hoe snel het voltooide model je beantwoordt.

Training rekenen
6.7 × 10²² FLOP

"770±50 PFlops/s·days of compute" for the model that played against world champions. They did a single training run that took 10 months. While the model was playing against world champions, they continued training for a few days, so that the resulting model used even more training compute: 820±50 PFlops/s·days. Finally, they also trained a Rerun model with 150±5 PFlops/s·days of compute. Source: Dota 2 with Large Scale Deep Reinforcement Learning https://arxiv.org/abs/1912.06680 You cannot m…

Hoe het werd opgericht
Reported

De trainingsrun

Wat het fysiek kostte om te trainen: welke chips, hoeveel, hoe lang, en wat dat van het stopcontact vroeg.

Training hardware
NVIDIA P100
Gebruikte chips
1,536
Chip-uren
10,911,744
Kloktijd
7,104 hours (296 days)

"OpenAI Five is a single training run that ran from June 30th, 2018 to April 22nd, 2019. " --> 296 days

Stroomverbruik
786.4 kW
Rekenkosten
$4,328,311

Beschikbaarheid

Of je het model kunt verkrijgen en het op je eigen hardware kunt draaien, wat bepaalt of een van de grafische kaartcijfers op deze pagina van toepassing is.

Gewichten
Closed — provider access only
Toegang tot model
Unreleased
Training code
Unreleased

Hoe het is geclassificeerd

Labels van de brondataset die worden toegepast bij het volgen van opmerkelijke modellen, en hoe zeker het is van de invoer.

Grensmodel
Yes
Waarom het wordt gevolgd
Highly cited,SOTA improvement

no standard benchmark results "On April 13th, 2019, OpenAI Five became the first AI system to defeat the world champions at an esports game." " it defeated the Dota 2 world champions in a best-of-three match and 99.4% of human players during a multi-day online showcase." "we ran OpenAI Five Arena, in which we opened OpenAI Five to the public for competitive online games from April 18-21, 2019. In total, Five played 3,193 teams in 7,257 total games, winning 99.4%"

Record vertrouwen
Confident
Citaties
2,137

Bronnen

Waar deze record vandaan kwam en wanneer deze voor het laatst is gecontroleerd.

Referentie
Dota 2 with Large Scale Deep Reinforcement Learning
Laatst bijgewerkt
25 May 2026

Wat de cijfers betekenen

Wat dit model is

OpenAI Five werd gepubliceerd door OpenAI, in het land geregistreerd als United States of America, tijdens December 2019. De publicerende organisatie is geclassificeerd als industry.

Het werkt in het domein van Games, en wordt geregistreerd als het uitvoeren van de taak van dota 2.

Dit is een gesloten model: de getrainde waarden zijn bij degene gebleven die ze geproduceerd hebben, en er is geen lokale versie om te draaien.

Wat erin ging zitten om het te bouwen

De training run verbruikte ongeveer 6.7 × 10²² FLOP, op hardware vastgelegd als NVIDIA P100. Die figuur meet wat het produceren van het model heeft gekost en heeft geen invloed op hoe snel het antwoord geeft.

De trainingsset liep naar ongeveer 454,164,480,000 tekstokens

Het wordt gevolgd in de onderliggende dataset om één specifieke reden: highly cited,SOTA improvement.

Antwoorden

OpenAI Five — veelgestelde vragen

01

OpenAI Five— wie heeft het gemaakt?

Het werd gepubliceerd door OpenAI, gebaseerd op United States of America, een organisatie geclassificeerd als industry.

02

OpenAI Five— wanneer is het uitgebracht?

Het werd gepubliceerd in December 2019. De capaciteit per parameter is aanzienlijk verbeterd sinds, zodat een nieuwere model van dezelfde grootte vaak een betere benutting van dezelfde hardware is.

03

OpenAI Five— waarvoor wordt het gebruikt?

Het werkt in het domein van Games, en wordt geregistreerd als het afhandelen van dota 2. Dit zijn de gebieden waar het omheen is ontworpen; ze beschrijven intentie eerder dan een harde grens.

04

OpenAI Five— hoeveel rekencapaciteit is gebruikt om het te trainen?

Training verbruikte ongeveer 6.7 × 10²² FLOP, op hardware vastgelegd als NVIDIA P100. Dat meet wat het kosten om het model te produceren en zegt niets over hoe snel het antwoord geeft zodra het getraind is — inferentie snelheid komt van geheugenbandbreedte, niet van het trainingsbudget.

05

OpenAI Five— Welke GPU heb ik nodig om het te draaien?

Dit is een gesloten model — de gewichten zijn nooit gepubliceerd, dus het kan niet gedownload of uitgevoerd worden op je eigen hardware voor eender welke prijs. Het is alleen bereikbaar via de aanbieder.

06

OpenAI Five— is het open-source?

Nee. De gewichten zijn niet gepubliceerd, dus het bestaat alleen als een dienst die wordt beheerd door de eigenaar.

07

OpenAI Five— hoeveel parameters heeft het?

Het heeft een parameter telling van 159M. "We define a policy (π) as a function from the history of observations to a probability distribution over actions, which we parameterize as a recurrent neural network with approximately 159 million parameters (θ)." pg. 3 of paper source: https://docs.google.com/spreadsheets/d/1Kj4Q5WADcDXtUJLIOfGTCE3tGvxNczEMwyy8QtgSkHk/edit#gid=54587040&fvid=1361937389. Dat cijfer is het totaal, en het bepaalt hoeveel MEMORY het MODEL nodig heeft - ongeveer een halve gigabyte per miljard bij de compressie die de meeste mensen gebruiken.

Bron

Originele publicatie

Laatste update geregistreerd 25 May 2026

De andere richting

Van de andere kant bekijken?

Deze pagina begint met het model. Als je al een kaart bezit en alles wilt weten wat het zal draaien, begin in plaats van de hardware.