OpenAI Five
Už minulý rok na The International 2017 sme mali možnosť vidieť 1v1 zápas medzi pro hráčmi a počítačom. Organizácia si na tento rok pre nás pripravila sľubovaný zápas s celým tímom, ako môžeme zatiaľ vidieť, sú na veľmi dobrej ceste.
OpenAI tím získa každý deň skúsenosti rovnajúce sa 180 rokom hrania, učia sa vzájomnou hrou. Celý tréning sa uskutočňuje pomocou rozšírenej verzie strojového učenia, ktoré beží na 256 GPUs a 128,000 CPU jadier – oveľa lepšia verzia systému, ktorá sa použila pri 1v1 minulý rok. Použitím rozličnej dlhodobej a krátkodobej pamäte pre každého hrdinu sa stroj dokázal naučiť rozpoznateľné stratégie. Znamená to, že posilnenie učenia dokáže priniesť dosiahnuteľné výsledky.
OpenAI Dota 2 tím
Hry:
Doposiaľ hralo OpenAI (spoločne s obmedzeniami) proti každému z týchto tímov:
- OpenAI zamestnanecký tím: 2.5k MMR
- najlepší hráči z publika (vrátane Blitza): 4-6k MMR (nikdy nehrali spoločne ako tím)
- tím Valve zamestnancov: 2.5-4k MMR
- amatérsky tím: 4.2k MMR
- stredne-profesionálny tím: 5.5k MMR
23. apríla porazil OpenAI tím prvýkrát zamestnancov. 15. mája dokázal hrať vyrovnané hry. Verzia z 6. júna vyhrala všetky zápasy proti tímom 1-3. Proti dalším dvom tímom hralo OpenAI 6. júna screamy, kde sa očakávala jasná prehra. Nakoniec ale OpenAI vyhralo 2 z 3 zápasov proti každému tímu.
zápas tímu zamestnancov, komentovaný Blitzom
Opakovane sa vzdal vlastnej safe linky výmenou za kontrolu nad nepriateľskou safe linkou, presúvaním bojov na stranu, ktorá je pre oponenta ťažšia na obranu.
OpenAI tím dokázal postupovať rýchlejšie ako súper v early až mid-game fázy hry. Podarilo sa mu to vďaka: úspešným gangom, zoskupením sa k hráčom pod veže skôr, ako mohli zorganizovať nejaký counterplay.
Odčleňuje sa v niektorých prípadoch od zvyčajného herného štýlu. Napríklad nehávaním skúseností a zlata v začiatkoch hry supportom – robí to preto, aby boli čo najskôr schopní bojovať. Vďaka tomuto a využívaním chýb protihráčov si zabezpečujú rýchle víťazstvo.
Zatiaľ čo súčastná vezia OpenAI zaostáva v last hitovaní, ako poznamenal komentátor Blitz pri sledovaní niektorých zápasov, ide skôr o prioritizáciu cieľa. Získanie dlhodobej výhody, ako je kontrola mapy, si vyžaduje obetu. Zlato získané z farmenia musí isť stranou na úkor zoskupenia sa a rýchleho pushovania veží.
Súčasné obmedzenia:
- jedine zrkadlový zápas s Necrophosom, Sniperom, Viperom, Crystal Maiden a Lichom
- žiadne wardy
- žiadny Roshan
- žiadna neviditeľnosť (rovnako aj itemy)
- žiadne ilúzie
- žiadny z nasledovných itemov: Divine Rapier, Bottle, Quelling Blade, Boots of Travel, Tome of Knowledge, Infused Raindrop
- žiadny scan