Große Datenbestände

Wir bekommen immer wieder Anfragen, wie viele Datensätze im GENprofi5 verwaltet werden können. Hier können wir leider nur sagen: Wir haben keine Ahnung.

Das klingt ziemlich ernüchternd, aber es ist wirklich schwierig, hier eine klare Aussage zu treffen. Natürlich können wir die theoretischen Grenzen herunterbeten - aber wem hilft das?

Also haben wir uns hingesetzt und einen Testbestand erzeugt, der sehr wahrscheinlich größer ist, als der umfangreichste Bestand bei einem Anwender. Der größte uns bekannte Bestand in einem Forschungsbereich umfasst 450.000 Personen (Sie haben einen größeren Bestand, dann reicht eine kurze Info und wir korrigieren das hier umgehend). Dieses Volumen galt es zu schlagen.

Nach dem Aufbau der Daten haben wir in dem Bestand gesucht, neue Datensätze eingetragen und die Optimierung laufen lassen. Alles lief ohne Probleme - ok, wir hatten zwischendurch schon das Gefühl, dass etwas nicht in Ordnung war, weil die Wartezeiten bei der Standardsuche länger dauerte, als man es normalerweise erwarten würde.

Das lag aber daran, dass wir bei unserem Testdatenbestand natürlich viele Doubletten hatten und wir so in der Regel Suchergebnisse erhielten, die gut und gerne 80.000 bis 120.000 Treffer erzielten. Danach konnte man sich die Suchzeit von 7 Sekunden erklären.

Auch dauerte die Optimierung etwas länger …

Details kann man den nachfolgenden Tabellen entnehmen.

Kurz zusammengefasst ist der Testdatenbestand gute 8 GB groß, es sind etwas mehr als 4 Millionen Personen enthalten und die Optimierung für diesen Bestand dauerte knapp 35 Minuten.