Auf riesige .txt dateien zugreifen

[alzaimar]

Chunk = Bissen.

Nehmen wir an, du wilst einen String der Länge 100 suchen
Du lädst 1000 Zeichen ein und fängst an zu suchen. Wenn Du beim 901.Zeichen angelangt bist, schmeißt Du die ersten 900 Zeichen weg und lädst die nächsten 1000 Zeichen ans Ende des nun etwas reduzierten 'Chunks'. Nun hast Du 1100 Zeichen im Speicher und kannst weiter suchen. Immer wenn Du kurz vor dem Ende des 'Chunks' bist (also wenn deine Position < Länge - Suchtextlänge) ist, dann lädst Du den nächsten Bissen in den Speicher.

Wenn Du nach Wildcards suchst, geht das nicht so. Ich würde mir eine Funktion 'AdvanceFilePos' schreiben, die die Position eines virtuellen Zeigers in deiner Datei erhöht. Dabei prüft er jedes Mal, ob die Daten an dieser Position überhaupt geladen ist, lädt ggf. nach und verwirft die Teile, die bereits durchsucht wurden.