Hallo,

wie geht man mit Dateien um die man komplett einlesen muss, die aber größer als der vorhandene Arbeitspeicher sind? Behandelt man sie päckchenweise? Ich möchte eine Speicherauslagerung vermeiden da die mich Zeit kostet.

Danke=)

Du kannst Tie::File verwenden, wenn du die Datei zeilenweise durchgehen musst. Das ist soweit ich mich erinnere unproblematischer weil immer nur ein Block in den Arbeitsspeicher gelesen werden muss.

die datei ist aber ein binär file und ich adressiere byteweise da meine informationen in einem 16 byte format stecken - jede 16 byte lese ich in ein element eines feldes ein -- da ich alle informationen bearbeiten muss kann ich nicht immer einmal 16 byte nehmen bearbeiten und das nächste - kostet zuviel zeit da jedesmal ein dateizugriff stattfindet??!

Dann lies doch in Blöcken mit einem Vielfachen von 16 Byte und splitte diese dann selbst auf. Aber eigentlich würde ich erwarten, dass das System diese Arbeit für mich macht.

[quote=rookie,04.08.2004, 10:05]kostet zuviel zeit da jedesmal ein dateizugriff stattfindet??![/quote]
Das unterliegende System (stdio oder PerlIO) liest immer groessere Bloecke ein, so dass kein Festplattenzugriff dabei stattfindet.

d.h. es werden automatisch Blöcke abhängig vom aktuellen Arbeitsspeicher eingelesen - auch wenn ich anweise das die komplette Datei in ein Array eingelesen werden soll?

Danke im Voraus

Es werden immer Blöcke der Größe, die von deinem Dateisystem her optimal ist, eingelesen und im Arbeitsspeicher behalten. Sobald du mehr Daten von der Datei haben willst, wird der nächste Block eingelesen. (es sei denn du arbeitest mit syswrite und sysread)

Wenn man aber die ganze Datei komplett in eine Datenstruktur einliest, dann liegt diese Datenstruktur auch komplett im Speicher bzw. Swap!
Das Puffern dient nur dazu, dass auch ein Algorithmus, der eine Datei z.B. zeichenweise bearbeitet, noch effizient laufen kann, ohne dass sich der Programmierer einen Kopf machen muss, in welchen Portionen er die Datei am besten einliest -- eben genau was du brauchst ;)