VILÁGMODELLEK
Az Odyssey és a World Labs API-kat adtak ki interaktív 3D világok generálásához
Az Odyssey elindította az Odyssey-2 Pro-t, egy világmodellt, amely valós idejű, interaktív videót sugároz 720p/22fps felbontásban. A modell képkockáról képkockára jósolja meg a világ alakulását, videóadatokból tanulva meg a fizikát és a viselkedésmintákat. Ezzel egy időben a World Labs elindította a World API-t, amely lehetővé teszi a felhasználók számára, hogy bármilyen képet, videót vagy szöveges promptot feltöltsenek, és körülbelül öt perc alatt egy bejárható 3D környezetet kapjanak a Marble modelljük segítségével. Ezek a technológiák egyszerű bemeneti adatokból generálnak felfedezhető tereket, lehetővé téve a felhasználást a játékiparban, a robotikában, az építészetben és az oktatásban.
- Az Odyssey-2 Pro folyamatos, interaktív videót generál, amely szöveges promptok alapján azonnal frissül.
- A World Labs Marble modellje teljes 3D világokat hoz létre mélységgel és világítással, amelyek Gaussian splats és mesh formátumban exportálhatók.
- A játékipari alkalmazások közé tartozik a 2D filmek bejárható 3D terekké alakítása olyan eszközökkel, mint az Escape.ai.
- A robotikai csapatok több ezer tanító környezetet generálhatnak mindössze néhány képből az NVIDIA Isaac Sim segítségével.
- Az építészetben és belsőépítészetben a felújítások bejárható terekként vizualizálhatók az ügyfélprezentációkhoz.
- Az Odyssey JavaScript és Python SDK-kat kínál, míg a World Labs a szabványos 3D munkafolyamatokba (pipeline-okba) integrálódik.
Miért fontos?
Az Odyssey ezt a világmodellek „GPT-2 pillanatának” nevezte, és a hasonlat találó: amikor a nyelvi modell API-k megjelentek, senki sem jósolta meg a ChatGPT üstökösszerű felemelkedését. Ez még annál is nagyobb horderejű lehet, hiszen itt teljes világokat generálunk. A határ valóban csak a képzelet (na meg a számítási kapacitás... de ha az adatközpont-építések üteme mérvadó, ez hamarosan megoldódik!)