Bewertung der Antwortqualität
Definition
Antworten anhand ausdrücklich benannter Kriterien bewerten.
Ein Antwortqualitätswert verdichtet Kriterien wie Korrektheit, Relevanz und Vollständigkeit einer Antwort; eine allgemeingültige Berechnungsformel existiert dafür nicht.
Einfach erklärt
Eine Antwort bekommt eine nachvollziehbare Bewertung nach einer festen Rubrik.
Warum das im Alltag wichtig ist
Unterschiedliche Systemstände können auf denselben Aufgaben verglichen werden.
Beispiel aus dem Mittelstand
Ein fiktiver Supporttest bewertet jede Antwort nach Richtigkeit und hilfreicher Handlungsanleitung.
Grenzen und Fallstricke
- Automatische Bewertungen können irren; flüssiger Stil darf Sachfehler nicht verdecken.
Entstehung & Geschichte
Solche Werte entstehen im Umfeld der Evaluation von Frage-Antwort- und Sprachmodellsystemen.
Anwendung im Mittelstand
- Fachliche Stichproben und dokumentierte Bewertungsregeln kombinieren.
Häufige Fragen
Darf ein Sprachmodell bewerten?
Ja, aber seine Urteile brauchen Kalibrierung und Kontrolle.
Quellen
Redaktionell geprüft am: