Evaluierung des Lernens von Bibliotheken für die Codegenerierung im Kontext

Selbst kleinere, öffentlich zugängliche Sprachmodelle wie Llama-2 und StarCoder zeigen ein beachtliches Verständnis für die Verwendung neuer Codebibliotheken, das auf Spezifikationen basiert, die im Kontext präsentiert werden. Die Ergebnisse zeigen, dass Sprachmodelle sogar dann eine überraschend hohe Leistungsfähigkeit beim Lernen neuer Bibliotheksmodule aufweisen, wenn ihnen nur Beschreibungen in natürlicher Sprache oder rohe Codeimplementierungen der Funktionen zur Verfügung gestellt werden.