Begrenzte Leistungsfähigkeit von Sprachmodellen: Wie Abrufverstärkung und Überbestimmung die Generalisierungsfähigkeit beeinflussen
Sprachmodelle, die mit k-Nächste-Nachbarn-Abrufverstärkung (kNN-Abrufverstärkung) ausgestattet sind, übertreffen herkömmliche Sprachmodelle, da sie besser in der Lage sind, aus überbestimmten Trainingsdaten zu generalisieren.