Wie Kontext und Vorwissen in Sprachmodellen zusammenwirken

Sprachmodelle müssen sowohl ihr Vorwissen aus dem Training als auch neue Informationen aus dem Kontext integrieren, um Fragen zu beantworten. Das Ausmaß, in dem sie sich auf das Vorwissen oder den Kontext verlassen, variiert jedoch je nach Entität und Kontext.