Satya Nadella bírálja a modellklónozással kapcsolatos kettős mércét az AI-iparban
Satya Nadella, a Microsoft vezérigazgatója, a közelmúltban élesen bírálta az AI-iparban kialakult kettős mércét a modell-desztilláció kapcsán. Nadella álláspontja szerint elfogadhatatlan, hogy azok az élvonalbeli kutatólaborok, amelyek saját fejlesztésű rendszereiket az internet nyilvános adatainak tömeges felhasználásával építették fel, most szigorú korlátozásokkal próbálják megakadályozni, hogy mások az általuk létrehozott modellek kimeneteit használják fel saját fejlesztéseikhez. A Microsoft vezetője szerint ez az egyirányú tudásáramlás – ahol a nagy cégek mindent felhasználhatnak a saját modelljeik betanításához, miközben megtiltanák a versenytársaknak a hasonló módszerek alkalmazását – komoly etikai és szakmai kérdéseket vet fel az innováció jövőjével kapcsolatban.
A vita középpontjában a modell-desztilláció áll, egy olyan technológiai folyamat, amely lehetővé teszi a fejlesztők számára, hogy jelentősen alacsonyabb költségek mellett hozzanak létre hatékony modelleket, felhasználva az erősebb, úgynevezett frontier-modellek válaszait és logikai mintáit. Ez a gyakorlat azonban szemet szúrt az iparág óriásainak, mint például az OpenAI-nak vagy az Anthropic-nak, amelyek Washingtonban már figyelmeztetést is kiadtak az ügyben. Állításuk szerint a külföldi, például kínai cégek célzottan használják a desztillációt az amerikai technológiák lemásolására. Az Anthropic konkrét példával is szolgált: elmondásuk szerint az Alibaba 25 000 hamis fiókon keresztül több mint 29 millió interakciót gyűjtött össze a Claude modelljükkel, amit aztán saját rendszereik továbbfejlesztésére használhattak fel.
Ez a jelenség azért bír kiemelt jelentőséggel, mert alapjaiban kérdőjelezi meg az AI-ipar jelenlegi gazdasági modelljét. A vezető laborok dollármilliárdokat költenek kutatói gárdákra, GPU-kapacitásra és az adathalmazok tisztítására, hogy megalkossák a piacon elérhető legfejlettebb rendszereket. Amennyiben egy versenytárs cég fillérekből képes lemásolni ezeket a képességeket a desztilláció segítségével, azzal hosszú távon veszélybe kerülhet a csúcsmodellek fejlesztésének nyereségessége és a vállalatok motivációja a következő, még nagyobb teljesítményű generációk finanszírozására. A probléma gyökere azonban ott rejlik, hogy az érintett nagyvállalatok korábban ugyanezt a rugalmasságot élvezték, amikor az egész internetet – gyakran licencelés nélkül – használták fel az alapmodelljeik betanítására. Nadella kritikája így arra világít rá, hogy az iparágnak tisztáznia kell: meddig terjed a nyilvános adatok és a modellkimenetek felhasználásának szabadsága, anélkül, hogy az az innováció megfojtásához vagy a technológiai dominancia tisztességtelen védelméhez vezetne.
- A desztilláció lehetővé teszi a fejlesztők számára, hogy olcsón képezzenek új modelleket erősebb modellek válaszai alapján.
- Az OpenAI és az Anthropic figyelmeztette Washingtont, hogy kínai cégek desztillációt használnak amerikai modellek klónozására.
- Az Anthropic azt állítja, hogy az Alibaba 25 000 hamis fiókot használt fel 29 millió Claude-interakció összegyűjtésére.
- Egy Business Insider-vizsgálat szerint a desztilláció veszélyeztetheti a frontier-modell üzletág nyereségességét.
A vezető laborok hatalmas összegeket költöttek kutatók felvételére, számítási kapacitás vásárlására és a legjobb modelljeik mögött álló adatkészletek létrehozására. Ha egy másik cég fillérekért képes reprodukálni ezeket a képességeket, akkor a következő modellre szánt milliárdok elköltésének gazdasági indoklása sokkal nehezebbé válik. A probléma az, hogy ezek a laborok is olyan nyilvános anyagok felhasználásával építették a rendszereiket, amelyeket gyakran nem licenceltek egyenként. ---