GOOGLE RESEARCH
Kutatók zenévé alakítják az emberi agytevékenységet
Röviden: A Google kutatói kidolgoztak egy „Brain2Music” nevű módszert a zene rekonstruálására az emberi agyi aktivitásból.
- A megközelítés vagy zenei lekérdezést, vagy egy MusicLM nevű zene-generáló modellt használ, amelyet fMRI adatokból származó beágyazásokkal (embeddings) kondicionálnak.
- A generált zene szorosan hasonlít a tapasztalt zenei ingerekre, beleértve az olyan szemantikai tulajdonságokat is, mint a műfaj, a hangszerelés és a hangulat.
- A tanulmány a MusicLM különböző összetevői és az agyi aktivitás közötti kapcsolatot vizsgálja voxel-alapú kódolási modellezési elemzés segítségével.
Miért fontos?
Egy olyan világ felé tartunk, ahol a zenét nemcsak halljuk, hanem az agyi mintázatokon keresztül is látjuk. A jövő csodálatos lesz. ---