Az Oasis generatív modell teljes egészében neurális súlyokon belül futtatja a Minecraftot
Két startup – az Etched és a Decart – kutatói a „neurális játékok” szemléletes bemutatójaként beágyazták a Minecraftot egy neurális hálózatba. Az eredményül kapott játék böngészőben játszható; figyelemre méltóan hasonlít az eredetire, annak ellenére, hogy a képek néha kissé elmosódottak, miközben a neurális háló eldönti, mely objektumokat jelenítse meg.
Ez a végtelen játékok jövőjét vetíti előre, ahol nincs mögöttes forráskód; minden a hálózat súlyaiban tárolódik. Ahogy sikerül megoldani több játék beágyazását egyetlen modellbe, olyan generatív modelleket láthatunk majd, amelyek zökkenőmentesen ötvözik a különböző játékok stílusát és játékmenetét.
- Egy térbeli autoencoderből (ViT) és egy látens diffúziós gerincvázból (DiT) áll.
- A képkockákat autoregresszív módon generálja, lehetővé téve a valós idejű interakciót a felhasználói bevitelre.
- Úgy tervezték, hogy az Etched speciális Sohu ASIC-jén fusson a nagy felbontású következtetés érdekében.
- A skálázási törvények azt sugallják, hogy a legtöbb renderelési hiba nagyobb modellekkel és adatkészletekkel orvosolható.
Ez a generatív modellek egy új osztályát képviseli, amely lehetővé teszi a kutatók számára, hogy neurális hálózatokon belül építsenek játékokat. Egy olyan jövőt sugall, ahol a végtelenül újrajátszható játékok menet közben generálódnak, elmozdulva a hagyományos szoftvermérnöki munkától a tisztán neurális szimulációk felé.