Von modellzentriert zu menschenzentriert: Revisionsdistanz als Metrik für die Textevaluierung in LLM-basierten Anwendungen
Die Revisionsdistanz ist eine menschenzentrierte Metrik, die die Anzahl der Überarbeitungen quantifiziert, die ein Nutzer an einem von einem LLM generierten Text vornehmen muss, um eine vorgegebene Qualitätsschwelle zu erreichen. Im Vergleich zu herkömmlichen kontextunabhängigen Bewertungsmetriken bietet die Revisionsdistanz detailliertere und transparentere Einblicke in die Qualität des LLM-generierten Texts.