Re: [InetBib] Open-Source-Programm Mable+ zur Analyse von Katalogdaten veröffentlicht

[Julia Goltz <goltz@xxxxxx>]

Lieber Herr Lehmann,
> allerdings: java? keine schnelle basis fürs janze. ich kann mir nicht 
> vorstellen, hat man 500.000 datensätze, ist die analyse innerst 
> wenigen minuten getan. man wird sehen ;-)

Sie haben recht, daß jede Programmiersprache ihre Vor- und Nachteile 
hat, aber bisher sind wir mit der Performance von Java sehr zufrieden.

Der Rechner, auf dem der Großteil der Entwicklung stattfindet, ist recht 
großzügig dimensioniert und verarbeitet 500.000 Datensätze in ungefähr 
einer Minute. Die Geschwindigkeit variiert dabei abhängig vom Umfang der 
einzelnen Sätze. Die Spitzen liegen bei etwa 22.000 Datensätzen pro 
Sekunde.

Um ein vielleicht realistischeres Ergebnis zu erhalten, haben wir im 
Laufe der letzten zwei Tage auch Tests auf anderen Systemen 
durchgeführt. Bei einem älteren Rechner mit folgender Spezifikation:

- Pentium (Q)D CPU 3,4 Ghz, 2 GB RAM,
- Windows XP Professional, Version 2, Service Pack 3

werden 200.000 aktuelle bibliographische Datensätze einer Berliner 
Hochschule in etwa 100 Sekunden verarbeitet. Das heißt für 500.000 
Datensätze würde diese System etwa 4-5 Minuten benötigen.

Bei mehreren Millionen Datensätzen spielt der verfügbare Speicher eine 
Rolle, insbesondere für die Prüfung der Referenzen. Wir waren aber in 
der Lage die etwa 20 Millionen Datensätze des B3Kat auf einem System mit 
4 GB RAM in 59 Minuten zu prüfen.

Mit freundlichem Gruß,
das Projektteam Mable+
Jens Schwidder und Julia Goltz

-- 
==============================================================
Julia Alexandra Goltz
Scientific Librarian

Kooperativer Bibliotheksverbund Berlin-Brandenburg (KOBV)
c/o Konrad-Zuse-Zentrum für Informationstechnik Berlin (ZIB)
Takustr. 7, D-14195 Berlin

Telefon: (030) 84 185 - 487
Telefax: (030) 84 185 - 269
  E-Mail: goltz@xxxxxx
     WWW: http://www.kobv.de/
==============================================================

-- 
http://www.inetbib.de