A FRONTVONALRÓL
A Decart elindította a Mirage-t a valós idejű videó- és játéktranszformációhoz
Ez egy ismerős körforgás: beírja a promptot, megnyomja a generálást, szorít az eredményért – majd kezdi elölről, remélve, hogy ezúttal működni fog. A Decart nevű startup zökkenőmentesebbé (és szórakoztatóbbá) szeretné tenni ezt a folyamatot azáltal, hogy lehetővé teszi az élő közvetítések valós idejű átalakítását az utólagos szerkesztés helyett. A hét folyamán kiadják az általuk „legelső Világátalakító Modellnek” (World Transformation Model) nevezett Mirage platformot, amely bármilyen videót vagy játékot képes átformálni. Egyelőre egy demó verzió érhető el, ahol webkamerával alakíthatjuk át magunkat és környezetünket olyan előre beállított stílusokkal, mint a „Versailles-i palota”, „anime” vagy „fonalvilág”. Saját ötleteket is megadhatunk, például „kubista festmény” vagy „fekete-fehér”. Hogyan működik? Hasonlóan a Decart Oasis kísérletéhez, amely egy mozgásra változó digitális világot generál, a Mirage autoregresszióra épül, ami azt jelenti, hogy minden egyes következő képkockát az előző alapján hoz létre. Ez sokkal hatékonyabb folyamat, mint a hagyományos, diffúziós alapú megközelítések.
- A Mirage egy „Világátalakító Modell”, amely képes az élő videostream-ek vagy játékok valós idejű átformálására.
- Egy élő demó lehetővé teszi a felhasználók számára, hogy átalakítsák magukat olyan stílusokkal, mint a „Versailles-i palota”, „anime” és „fonalvilág”.
- A platform egyedi szöveges promptokat is elfogad olyan vizuális stílusokhoz, mint a „kubista festmény” vagy a „fekete-fehér”.
- A modell autoregressziót használ a képkockák szekvenciális generálásához az előzőek alapján.
- Ez a folyamat jelentősen hatékonyabb a standard diffúziós alapú videógenerálási módszereknél.
Miért fontos?
Könnyen látható, hová vezet ez: ugyanazt az alaptechnológiát használva egy napon úgy nézhetünk egy focimeccset, mintha egy futurista cyberpunk világban játszódna. Vagy megváltoztathatjuk kedvenc videojátékunk környezetét víz alatti vagy vadnyugati témára. A Mirage és a hasonló modellek a közösségi médiára is nagy hatással lehetnek, az interakcióink részévé válva olyan platformokon, mint a TikTok és az Instagram. ---