Snorkel
Definition
Snorkel hilft, Trainingsdaten mithilfe von Regeln und anderen schwachen Signalen zu kennzeichnen.
Statt jeden Datensatz einzeln zu beschriften, formuliert ein Team Kennzeichnungsfunktionen. Snorkel kann deren teils widersprüchliche Ergebnisse zusammenführen, um probabilistische Trainingslabels zu gewinnen.
Einfach erklärt
Mehrere unvollkommene Hinweise ergeben gemeinsam einen Vorschlag für ein Etikett.
Warum das im Alltag wichtig ist
Vorhandenes Fachwissen kann die Erstellung großer Trainingsdatensätze unterstützen.
Beispiel aus dem Mittelstand
Fiktives Beispiel: Ein Team kennzeichnet Supporttickets anhand von Begriffen, Absendern und vorhandenen Regeln.
Grenzen und Fallstricke
- Fehlerhafte oder voneinander abhängige Regeln können Verzerrungen verstärken; echte Testdaten bleiben nötig.
Entstehung & Geschichte
Snorkel stammt aus der Forschung zur schwachen Überwachung von Lernverfahren.
Anwendung im Mittelstand
- Vorbereitung von Trainingsdaten für Textklassifikation und Dokumentenrouting.
Häufige Fragen
Ersetzt Snorkel jede manuelle Prüfung?
Nein, insbesondere die Qualität der Regeln und unabhängige Testdaten müssen geprüft werden.
Quellen
- API-Dokumentation · Snorkel: API-Dokumentation –
Redaktionell geprüft am: