Inhaltsverzeichnis:
Definition - Was bedeutet Datenüberprüfung?
Bei der Datenüberprüfung werden die Daten nach einer Datenmigration auf ihre Richtigkeit überprüft. Es gibt verschiedene Arten der Überprüfung:
- Vollständige Überprüfung, bei der alle Daten überprüft werden
- Stichprobenüberprüfung, bei der eine kleine Stichprobe der Daten überprüft wird
Die Datenüberprüfung kann teuer und zeitaufwendig sein.
Techopedia erklärt die Datenüberprüfung
Wenn Daten aus einem Data Warehouse zur Verwendung in einem Big Data-Verarbeitungssystem migriert werden, müssen die Daten auf ihre Richtigkeit überprüft werden. Alles, von Rechtschreibfehlern über ungenaue Zahlen bis hin zu Datenverlusten, kann ein Big-Data-Projekt gefährden.
Eine Methode zur Überprüfung der Daten besteht darin, die Daten in einem System mit den migrierten Daten im anderen eins zu eins zu vergleichen. Dies kann jedoch zeitaufwändig sein und die Kosten für den Betrieb zweier Systeme können hoch sein.
Es ist auch möglich, nur eine Teilmenge der Daten zu überprüfen, aber eine Stichprobe kann möglicherweise nicht alle Daten darstellen. Administratoren müssen den Kompromiss zwischen Zeitaufwand und Kosten für die Datenüberprüfung abwägen und gleichzeitig die Richtigkeit sicherstellen. Die Automatisierung des Prozesses ist eine Lösung.
