====== Datachecker performance ====== [[Datachecker]] project ===== Tests ===== ==== Tests of SinglePointOutliersCleaner ==== * eine Jahresdatei aus Freudenstadt - 525602 Sätze (1066 -> invalid) * bounded (Window size is only 1 record) * ca. 1 Minute ==== Tests of BlockOutlierCleaner ==== * eine "Monatsdatei" aus Freudenstadt - 44640 Sätze * unbounded * ca. 10 Minuten * eine Datei aus Daten von 2 Monaten aus Freudenstadt - 87841 Sätze * dauerte ca. 30 Minuten * eine Jahresdatei aus Freudenstadt - 525602 Sätze (also ca. 500 mal mehr als meine Test-Datei mit 1262 Sätzen) * unbounded * von mir nach einer Stunde abgebrochen * window buffer size = 1000 (ca. 1 Tag) * ca. 2 Minuten (zu Hause) * ca. 4 Minuten (im Geschäft) * window buffer size = 5000 (ca. 3 Tage) * ca. 10 Minuten (zu Hause) * ca. 20 Minuten (im Geschäft) * window buffer size = 10000 (ca. 1 Woche) * ca. 20 Minuten (zu Hause)