แนวคิดหลัก
Ein Framework für schnelle und genaue Intentklassifizierung in dialogorientierten Systemen, das die Unsicherheit des Intentklassifikators in spezifische Klärungsfragen umwandelt, um den wahren Nutzerintent zuverlässig zu ermitteln.
บทคัดย่อ
Das vorgestellte Konforme Intentklassifizierung und Klärung (CICC) Framework adressiert die Herausforderungen der Intentklassifizierung in dialogorientierten Systemen. Es wandelt die heuristische Unsicherheit eines Intentklassifikators in eine Klärungsfrage um, die den wahren Intent mit einer vordefinierten Konfidenz enthält. Durch die Disambiguierung zwischen einer kleinen Anzahl wahrscheinlicher Intents kann die Nutzeranfrage schnell und genau aufgelöst werden.
Das Framework besteht aus drei Hauptkomponenten:
- Entscheidung, wann eine Klärungsfrage gestellt werden soll: Basierend auf der Größe der Vorhersagemenge des konformen Prädiktors wird entschieden, ob die Eingabe zu eindeutig ist, um eine Frage zu stellen, oder ob die Eingabe zu mehrdeutig ist und abgelehnt werden soll.
- Generierung der Klärungsfrage: Wenn eine Klärungsfrage angebracht ist, wird diese basierend auf der Vorhersagemenge und der Originaleingabe des Nutzers generiert, um eine natürliche Interaktion zu ermöglichen.
- Erweiterung für Out-of-Scope Erkennung: Das Framework kann auch für die Erkennung von Eingaben verwendet werden, die außerhalb des Anwendungsbereichs liegen.
In Experimenten mit sieben Datensätzen und drei Intentklassifikatoren zeigt CICC eine bessere Leistung als heuristische Ansätze zur Quantifizierung der Vorhersageunsicherheit. Die Vorteile von CICC sind besonders bei mehrdeutigen Eingaben, die in realen Dialogsituationen häufig auftreten, am deutlichsten.
สถิติ
Die Eingabe wurde als zu mehrdeutig eingestuft, da die Vorhersagemenge mehr als 7 Intents enthielt.
Die Vorhersagemenge enthielt 12 mögliche Intents.
คำพูด
"CICC kann Praktikern und Forschern erheblich dabei helfen, die Benutzererfahrung von Dialogagenten durch spezifische Klärungsfragen zu verbessern."