Az MIT kutatói közzétették a Neural MMO 2.0-t a fejlett multi-ágens tanulási kutatásokhoz
Az MIT egyik kutatócsoportja által vezetett projekt keretében megjelent a Neural MMO 2.0, egy szoftverplatform, amely AI ágensek képzésére szolgál komplex, többjátékos játékokban. A Neural MMO egy majdnem öt éve fejlesztés alatt álló projekt második jelentős kiadása. A frissítés "lehetővé teszi az általánosítás, a nyílt végű folyamatok és a tanterv-alapú tanulás (curriculum learning) kutatását – olyan területeket, amelyeket a korábbi verziókkal nehéz volt vizsgálni, és amelyek kifinomult, rugalmas szimulátorokat igényelnek" – írják a kutatók.
A Neural MMO legfontosabb frissítése az úgynevezett feladatrendszer, amely "lehetővé teszi a felhasználók számára az ágensenkénti vagy csapatonkénti célkitűzések és jutalmak meghatározását, kiterjesztve a platform alkalmazhatóságát a problémák szélesebb körére". Ez azt jelenti, hogy a Neural MMO-val kísérletezők megpróbálhatnak olyan többcélú RL rendszereket fejleszteni, ahol a különböző ágensek és csapatok eltérő célokat (vagy célok kombinációit) követnek.
A csapat a rendszer általános teljesítményén is javított: „A Neural MMO 2.0 új motorja másodpercenként körülbelül 3000 ágens-lépést futtat CPU-magonként, ami jelentős előrelépés a korábbi verzió nagyjából 800-1000 körüli értékéhez képest.”
- A Neural MMO 2.0 egy nyílt forráskódú (open-source) platform AI ágensek képzésére komplex többjátékos környezetekben.
- Tartalmaz egy új feladatrendszert a specifikus ágensenkénti vagy csapatonkénti célok meghatározásához.
- A szimulációs motor háromszor gyorsabb a korábbi verzióknál, elérve a másodpercenkénti 3000 lépést CPU-magonként.
- Az általánosítás és a tanterv-alapú tanulás támogatására tervezték, azáltal, hogy ismeretlen térképekkel és ellenfelekkel állítja kihívás elé az ágenseket.
- Elősegíti a többcélú megerősítéses tanulási (RL) rendszerek fejlesztését.
Miért fontos?
A történelem homályába vesző 2013-ban a legtöbben a megerősítéses tanulás (RL) megszállottjai voltak... aztán a nyelvi modellek átvették az uralmat, és az RL ágensek kimentek a divatból. De tudják, mi volt régen divatjamúlt? A nyelvi modellek! Ezért érdemes fél szemmel követni az olyan platformokat, mint a Neural MMO, mivel ezek az RL ágensek következő generációjának tesztpályái lehetnek. ---