Kutatások feltárják: Az LLM-ek specifikus belső tokenekben kódolják az igazságtartalmat
A Technion és a Google bebizonyította, hogy az LLM-ek specifikus tokenekben kódolják az igazságtartalmat, ami javítja a hibafelismerést, miközben bejósolja a hiba típusait és feltárja a belső igazságkódolás és a külső viselkedés közötti eltérést.
- Bebizonyítja, hogy az igazságtartalom specifikus modell-tokenekben van kódolva
- Javítja a generálás során fellépő hibák észlelésének képességét
- Lehetővé teszi konkrét hibatípusok előrejelzését
- Azonosítja a belső igazságkódolás és a külső kimenet közötti szakadékot
Kapcsolódó hírek