Inhaltsverzeichnis:
Definition - Was bedeutet Datenvorverarbeitung?
Die Datenvorverarbeitung ist eine Data Mining-Technik, bei der Rohdaten in ein verständliches Format umgewandelt werden. Daten aus der realen Welt sind häufig unvollständig, inkonsistent und / oder weisen bestimmte Verhaltensweisen oder Trends auf und enthalten wahrscheinlich viele Fehler. Die Datenvorverarbeitung ist eine bewährte Methode zur Lösung solcher Probleme. Die Datenvorverarbeitung bereitet die Rohdaten für die weitere Verarbeitung vor.
Bei der Datenvorverarbeitung werden datenbankgestützte Anwendungen wie das Kundenbeziehungsmanagement und regelbasierte Anwendungen (wie neuronale Netze) verwendet.
Techopedia erklärt die Datenvorverarbeitung
Die Daten durchlaufen während der Vorverarbeitung eine Reihe von Schritten:
- Datenbereinigung: Daten werden bereinigt, indem z. B. fehlende Werte eingegeben, verrauschte Daten geglättet oder Inkonsistenzen in den Daten behoben werden.
- Datenintegration: Daten mit unterschiedlichen Darstellungen werden zusammengefügt und Konflikte innerhalb der Daten werden gelöst.
- Datentransformation: Daten werden normalisiert, aggregiert und verallgemeinert.
- Datenreduktion: Mit diesem Schritt soll eine reduzierte Darstellung der Daten in einem Data Warehouse dargestellt werden.
- Datendiskretisierung: Umfasst die Reduzierung einer Anzahl von Werten eines fortlaufenden Attributs durch Teilen des Bereichs von Attributintervallen.
