MI Történik?

A Hugging Face kutatói létrehozták az INTIMA-t, azaz az Interakciók és Gépi Kötődés Benchmarkot (Interactions and Machine Attachment Benchmark). Az INTIMA 368 benchmark promptból áll nyelvi modellek számára, amelyeket pontoznak, hogy segítsenek a fejlesztőknek megérteni a „társkereső viselkedést a nyelvi modellekben”. Az INTIMA motivációja nemcsak az LLM-ek nyers képességeinek megértése, hanem annak vizsgálata is, hogyan viselkednek az emberekkel. Az ehhez hasonló benchmarkok egyre hasznosabbá válnak, ahogy az emberek közvetlenül próbálják tanulmányozni, hogyan reagálnak az LLM-ek a kvalitatív vitatémákra, például amikor az emberek hosszas beszélgetéseket folytatnak velük az életükről és vágyaikról. A benchmark három különböző, de egymást kiegészítő elméleti kereten alapul: „paraszociális interakciós elmélet, kötődési elmélet és antropomorfizmus-kutatás”. A paraszociális elmélet azt vizsgálja, hogyan alakíthatnak ki az egyének egyoldalú érzelmi kötődést az LLM-ekkel. A kötődési elmélet célja, hogy magyarázatot adjon arra, miért váltanak ki bizonyos felhasználói sebezhetőségek – amelyek meghatározott interakciós és kötődési stílusokban nyilvánulnak meg – konkrét AI válaszokat. Az antropomorfizmus pedig segít megérteni, hogyan vehetnek fel az LLM-ek olyan működési módokat, amelyek miatt az emberek emberi jellemzőket tulajdonítanak nekik.