A Lightricks LTX új hang-alapú videógeneráló eszközt indított
Az AI kreatív platform, a Lightricks most jelentette meg új „Audio-to-video” funkcióját, amely lehetővé teszi a felhasználók számára, hogy hangból, zenéből vagy hangeffektusokból indulva generáljanak hozzá illő videót.
- Az eszköz közvetlenül a feltöltött hanghoz szinkronizálja a mozgást, a szájmozgást és a kameramozgást, fenntartva a konzisztenciát a generálások során.
- A felhasználók feltölthetnek fájlokat, rögzíthetnek hangot közvetlenül, vagy használhatják a beépített text-to-speech eszközt, amelyet az ElevenLabs Scribe V2 modellje hajt meg.
- Az LTX közlése szerint a modell érti a ritmust és a ütemet, így alkalmas zenei videók készítésére, valamint a kimenetek időzítésének és tempójának a hanghoz való igazítására.
- Az LTX a hangból való indítást „az AI videógenerálás harmadik paradigmájának” nevezte, amely konzisztensebb és természetesebb kimeneteket tesz lehetővé.
Miért fontos?
A hanggal való indítás teljesen új kreatív utakat nyit meg — lehetővé teszi a meglévő hangeszközök köré történő építkezést, ahelyett, hogy a párbeszédeket próbálnánk meg utólag hozzáilleszteni az AI által generált klipekhez. Bár az AI videózás már eddig is magas szintet ért el, a konzisztenciát és testreszabhatóságot biztosító eszközök jelentik a következő lépcsőfokot a modellek fejlődésében. ---