Datenvorverarbeitung
Die Kurzantwort · 15 Wörter
Kurz erklärt
Datenvorverarbeitung bringt Rohdaten reproduzierbar in eine Form, die für Analyse oder Machine Learning geeignet ist.
Flow-alerta.cab (2026): Datenvorverarbeitung. https://flow-alerta.cab/glossar/data-preprocessing. Redaktionell geprüft am: 10. Oktober 2026.
Wie ausführlich soll es sein?
Praxis
Passende Vorverarbeitung verbessert technische Verarbeitbarkeit und Vergleichbarkeit. Sie kann Fehler nicht wegzaubern und muss zusammen mit Datenqualität und Zielsetzung geprüft werden.
Fehlende Alterswerte werden nach definierter Regel imputiert, Kategorien One-Hot-kodiert und numerische Merkmale mit auf Trainingsdaten bestimmten Parametern skaliert.
KMU dokumentieren jeden Schritt, bewahren Rohdaten und vergleichen Auswirkungen auf Modell und Teilgruppen. Eine Pipeline reduziert Leakage-Risiken, verhindert sie aber nicht vollständig.
Auf einen Blick
- Kern
- Zur Vorverarbeitung gehören je nach Aufgabe Bereinigung, Imputation, Skalierung, Normalisierung, Kodierung und Transformation. Schritte können vor oder innerhalb einer Modellpipeline stattfinden. Gelernte Parameter dürfen nur aus den jeweiligen Trainingsdaten stammen.
- Nutzen
- Passende Vorverarbeitung verbessert technische Verarbeitbarkeit und Vergleichbarkeit. Sie kann Fehler nicht wegzaubern und muss zusammen mit Datenqualität und Zielsetzung geprüft werden.
- Beispiel
- Fehlende Alterswerte werden nach definierter Regel imputiert, Kategorien One-Hot-kodiert und numerische Merkmale mit auf Trainingsdaten bestimmten Parametern skaliert.
- Grenzen
- Transformationen vor dem Train-Test-Split anpassen, Testdaten zur Parameterwahl nutzen oder Ausreißer ohne fachliche Prüfung entfernen. Datenbereinigung und Feature Engineering überschneiden sich, sind aber nicht identisch.
Im Zusammenhang
Fragen, die dazu gestellt werden
Wann wird gefittet?
Ausschließlich auf dem Trainingsdatensatz beziehungsweise Trainingsfold.
Ist Skalierung immer nötig?
Nein, modellabhängig.
Ist Vorverarbeitung gleich Bereinigung?
Bereinigung ist ein möglicher Teil davon.
Alle Details und Hintergründe
Zur Vorverarbeitung gehören je nach Aufgabe Bereinigung, Imputation, Skalierung, Normalisierung, Kodierung und Transformation. Schritte können vor oder innerhalb einer Modellpipeline stattfinden. Gelernte Parameter dürfen nur aus den jeweiligen Trainingsdaten stammen.
ELI5 – Einfach erklärt
Bevor ein Modell lernt, werden uneinheitliche Angaben geordnet, fehlende Werte behandelt und Größen in eine vergleichbare Form gebracht.
Warum das im Alltag wichtig ist
Passende Vorverarbeitung verbessert technische Verarbeitbarkeit und Vergleichbarkeit. Sie kann Fehler nicht wegzaubern und muss zusammen mit Datenqualität und Zielsetzung geprüft werden.
Beispiel
Fehlende Alterswerte werden nach definierter Regel imputiert, Kategorien One-Hot-kodiert und numerische Merkmale mit auf Trainingsdaten bestimmten Parametern skaliert.
Fallstricke und Grenzen
- Transformationen vor dem Train-Test-Split anpassen, Testdaten zur Parameterwahl nutzen oder Ausreißer ohne fachliche Prüfung entfernen. Datenbereinigung und Feature Engineering überschneiden sich, sind aber nicht identisch.
Entstehung & Geschichte
Vorverarbeitung ist seit Statistik und maschinellem Lernen ein zentraler Arbeitsschritt. Bibliotheken bündeln Transformationen heute in reproduzierbaren Pipelines.
Anwendung im Mittelstand
- KMU dokumentieren jeden Schritt, bewahren Rohdaten und vergleichen Auswirkungen auf Modell und Teilgruppen. Eine Pipeline reduziert Leakage-Risiken, verhindert sie aber nicht vollständig.
Verwandte Begriffe
- Feature Engineering
- Imputation
- Skalierung
- Datenleckage
- scikit-learn Pipeline
Passende Flow-alerta-Leistung
KI-Potenzialanalyse & FahrplanKI-Datenvorbereitung und Qualitätssicherung: reproduzierbare, Leakage-arme Vorverarbeitung und Tests für produktive Pipelines entwickeln.Passendes Tool / Use Case
Praxisbeispiele ansehenscikit-learn Pipeline und ColumnTransformer; Use Case: gemischte numerische und kategoriale Auftragsdaten für ein Prognosemodell vorbereiten.Quellen
- scikit-learn.orgscikit-learn, „Preprocessing data“ (Abruf 06.10.2026)
Quellenprüfung: 10.10.2026. Definition und dokumentierte Einordnung abgeglichen; Beispiele beschreiben mögliche Anwendungen.
Redaktionell geprüft am: