Natural Questions
Definition
Natural Questions verbindet reale Suchfragen mit annotierten Antwortstellen.
Der Google-Datensatz enthält Fragen aus Suchanfragen und Wikipedia-Dokumente mit langen beziehungsweise kurzen Antwortannotationen. Er unterstützt die Untersuchung offener Fragebeantwortung.
Einfach erklärt
Eine Frage wird mit einem langen Dokument verbunden, in dem die Antwort gesucht werden muss.
Warum das im Alltag wichtig ist
Das prüft Retrieval und Antwortfindung näher an echten Informationsbedürfnissen.
Beispiel aus dem Mittelstand
Fiktiv: Ein Team untersucht, ob ein Modell passende Textstellen statt nur plausible Antworten findet.
Grenzen und Fallstricke
- Die Daten bilden bestimmte Quellen und Sprachen ab. Annotationen und Dokumentstände begrenzen die Aussagekraft.
Entstehung & Geschichte
Google stellte Natural Questions als Benchmark für Fragebeantwortung vor.
Anwendung im Mittelstand
- KMU können das Aufgabenprinzip auf eigene interne Dokumente übertragen.
Häufige Fragen
Enthält jede Frage eine Antwort?
Nein, auch fehlende Antworten sind für die Bewertung relevant.
Quellen
- Natural Questions — · Google Research: Natural Questions —
Redaktionell geprüft am: