A Google GameNGen rendszere egy neurális hálózat súlyain belül futtatja a DOOM-ot
A Google kifejlesztette a GameNGen-t, egy olyan rendszert, amely képessé tesz egy AI-t egy játék megtanulására, majd ezeket az adatokat felhasználva betanít egy generatív modellt magának a játéknak a létrehozására. A GameNGen „az első olyan játékmotor, amelyet teljes egészében egy neurális modell hajt, és amely lehetővé teszi a valós idejű interakciót komplex környezetekkel, hosszú szakaszokon keresztül, kiváló minőségben” – írja a Google a rendszert bemutató kutatási dokumentumban. Ez egyike azoknak a dolgoknak, amelyek egyszerre technológiai demók és a jövő fontos hírnökei: a jövőben a világ számos különféle részét neurális hálózatok által megtanult reprezentációkba fogjuk sűríteni, majd hagyni, hogy ezek életre keljenek a hálózatokon belül a végtelen generálás és újrahasznosítás érdekében.
- A GameNGen képzése két fázisban történik: egy RL-ágens megtanul játszani a játékkal, a meneteket pedig rögzítik, majd egy diffúziós modellt tanítanak be a következő képkocka előállítására a múltbeli képkockák és műveletek alapján.
- A rendszer egy egyszerű jutalmazási függvényt használ, amelyet úgy terveztek, hogy az emberi játékhoz hasonló tanítóadatokat generáljon.
- A szimulációs modelleket a Stable Diffusion 1.4 előre betanított ellenőrzőpontjából (checkpoint) képezték ki.
- A betanításhoz 128 TPU-v5e-t használtak, és a betanítás után egyetlen TPUv5-ön 20 FPS-sel fut.
- Az emberi értékelők a teszteseteknek csak 58-60%-ában választották a tényleges játékot a szimulációval szemben.
Miért fontos?
Végső soron mindent meg fog tanulni és reprezentációként beágyaz egy AI rendszerbe. Ezután ezek az AI rendszerek tetszőlegesen hozzáférhetnek majd ezekhez a reprezentációkhoz, és életre kelthetik őket. A jövőben az AI rendszerek lehetővé teszik majd, hogy kiválasszunk egy képkockát egy képből, és azt játékká alakítsuk, vagy egy szöveges leírás alapján építsünk fel egy játékot. A GameNGen választ ad az egyik fontos kérdésre az automatikusan generált játékok új paradigmája felé vezető úton. ---