Forskning3. august 2026
Ny metode bekjemper gjentagelser i store språkmodeller
Av redaksjonen
En ny teknikk kalt RMR lover å løse det utbredte problemet med «mode collapse» i generative AI-modeller, som fører til repeterende og lite variert tekst.
Nye forskningsresultater viser en vei ut av problemet med «» i -modeller, der tekstproduksjonen blir ensformig og repeterende. Fenomenet, ofte beskrevet som hallusinasjoner eller ulogiske repetisjoner, er egentlig et uttrykk for "geometrisk kollaps", hvor modellens indre tankegang låses til et smalt spor i sin representasjons-verden.
Forskere bak studien presenterer "Reinforced Mode Regulation" (RMR), en lettvektig intervensjon som regulerer dominerende selvforsterkende retninger i modellens interne «minne» – dens . RMR reduserer "mode collapse" betydelig og muliggjør stabil generering selv med lav informasjonstetthet, der standard dekoding vanligvis feiler.