ok, auch wenn es in der synopsis des moduls anders drin steht, scheint sich die Pure-Perl variante nach Digest::Perl::MD5 und nicht nach Digest::MD5 zu installieren. also dürftest du da schon das richtige haben.

eine idee habe ich noch. behalte doch mal den speicherverbrauch deines perl-programms im auge. evtl. muss der rechner swapen (kann ich mir eigendlich nicht vorstellen). vostellbar währe auch, dass es an der geschwindigkeit der festplatte bzw. des filesystems liegt. um das zu testen, könntest du mal die datei nach /dev/null ausgeben und schauen, wie lange das dauert.\n\n

<!--EDIT|Taulmarill|1163439184-->

Bei den obigen while-Schleife sollte man zusichern, dass die eingelesenen chunks nicht zu groß werden --- oder handelt es sich um Textdateien, bei denen in regelmäßigen Abständen Newlines kommen? Am besten $/ = \8192; oder so setzen.

Quote

Bei den obigen while-Schleife sollte man zusichern, dass die eingelesenen chunks nicht zu groß werden

chunks?

Quote

oder handelt es sich um Textdateien, bei denen in regelmäßigen Abständen Newlines kommen? Am besten $/ = \8192; oder so setzen.

Hab ich oben schon erwähnt

Quote

...
Es handelt sich hier um VMWare dateien
...

Es sind die Dateien die von der Software VMWare für eine virtuelle Maschine angelegt werden. Und diese sollen über Nacht gesichert werden. Und weil ich mir HUNDERTPROZENTIG sicher sein will das dieses Backup auch funktioniert hat und die Dateien einsatzbereit sind möchte ich ne Überprüfung mit rein nehmen und da letztens hier jemand einen Codeschnipsel gepostet hat wo das mit dem MD5 gemacht wird habe ich grad diesen getestet und dann verwendet.

ptk meint mit Chunks die Groesse der Bloecke, die pro Schleifendurchlauf eingelesen werden. Mit obiger Einstellung wuerde die Datei in 8k-Bloecken eingelesen werden.

Danke ;)

Und kann man da noch was verbessern?

Was würde es denn jetzt ausmachen wenn ich statt Digest::MD5 Digest::CRC
verwende? Ich hab mal sowas gehört das CRC nicht mehr wie 2GB kann. Stimmt das?

Danke

Gruß
Seri aka Zipster

Hast du meinen Ratschlag befolgt? Und hast du überprüft, ob nicht schon das Einlesen alleine langsam ist? Also nur die while-Schleife zum Einlesen ausführen, ohne MD5-Operationen?

While alleine ohne Md5 dauert genauso lange.
Wie könnte man das beschleunigen?

Hm, was interessant ist: die Methode addfile() liest die Datei auch in einer While-Schleife ein und das in 4k-Bloecken. Deshalb bringt diese Methode auch keinen Geschwindigkeitsvorteil :(

[quote=zipster,15.11.2006, 09:39]While alleine ohne Md5 dauert genauso lange.
Wie könnte man das beschleunigen?[/quote]
Und hast du es auch mit 4- oder 8K-Blöcken versucht?