Textdatei auslesen - braucht zu viel Speicher?

[Zerolith]

Hallo!

ich habe eine Normale Textdatei wo in jeder Zeile ein wort steht.
diese lese ich mit Assignfile usw aus.

dann habe ich ein:

Delphi-Quellcode:

TListe = array of String;

ich mache also in der schleife (while not eof) jeweils ein:

Delphi-Quellcode:

Setlength(Liste, length(Liste)+1);
Liste[High(Liste)] := s (aktuelle zeile)

die DAtei ist 4 MB groß (ungepackt)

und ich brauche 1, sehr sehr lange das auszulesen und 2. bruacht das ganze mehrere Hundert MB Arbeitsspeicher (und ist noch nicht mal sonderlich weit.

mich würde interessierern warum? die DAtei hat doch nur 4 mb?

Bsp: ein wörterbuch bei openoffice ist genauso aufgebaut - und die laden ja auch nicht stundenlang am anfang die wörterbuch Datei in den Arbeitsspeicher. Wie kann man das geschickt lösen um später z.B. ein bestimmtes wort zu suchen? ohne 4 gb ram zu haben und einen langen ladeprozess?

danke, Daniel

[Thanatos81]

Tritt der selbe Effekt auf, wenn du das ganze mit LoadFromFile in ne TStringList liest?

[Neutral General]

Delphi-Quellcode:

Setlength(Liste, length(Liste)+1);
Liste[Zählvariable] := s (aktuelle zeile)

Nicht eher so ?

[Kedariodakon]

Bei dem Dynamischen Array läuft das IMHO so:
Jedesmal wenn du die Länge erhöhst legt er dieses Array jedesmal neu im Speicher anlegt, den alten wert reinkopiert...
Wenn du das nun zeile für Zeile machst, könnte das dann der der grund sein, vielleicht solltest du erst die Länge bestimmen und dann die werte reintun...

Jedenfalls wenn ich mich nicht irre...


Bye

[Zerolith]

Zitat:

Zitat von Neutral General

Delphi-Quellcode:

Setlength(Liste, length(Liste)+1);
Liste[Zählvariable] := s (aktuelle zeile)

Nicht eher so ?

eh - nö? welche Zählervariable - so schreib ich immer in das gerade hinzugefügt Feld im Array.

Das mit der Stringlist probier ich schnell

[Zerolith]

Zitat:

Zitat von Kedariodakon

Bei dem Dynamischen Array läuft das IMHO so:
Jedesmal wenn du die Länge erhöhst legt er dieses Array jedesmal neu im Speicher anlegt, den alten wert reinkopiert...
Wenn du das nun zeile für Zeile machst, könnte das dann der der grund sein, vielleicht solltest du erst die Länge bestimmen und dann die werte reintun...

Jedenfalls wenn ich mich nicht irre...


Bye

Das klingt interessant. Ist es möglich vor dem Durchlaufen der gesamten datei festzustellen wieviele Zeilen drin sind?

[Kedariodakon]

Wie gesagt, ich bin mir mit dieser Aussage nich wirklich sicher, bei Strings.

Zitat:

Zitat von Zerolith

Das klingt interessant. Ist es möglich vor dem Durchlaufen der gesamten datei festzustellen wieviele Zeilen drin sind?

Word für Word auf #13#10 überprüfen oder besser gleich auf $0d0a und die dann zählen...
Vorrausgesetzt, es ist keine Datei im Unicode-Format...

Bye

[Luckie]

Zitat:

Zitat von Kedariodakon

Bei dem Dynamischen Array läuft das IMHO so:
Jedesmal wenn du die Länge erhöhst legt er dieses Array jedesmal neu im Speicher anlegt, den alten wert reinkopiert...
Wenn du das nun zeile für Zeile machst, könnte das dann der der grund sein, vielleicht solltest du erst die Länge bestimmen und dann die werte reintun...

Jedenfalls wenn ich mich nicht irre...

Du irrst nicht. ;)

[Zerolith]

Zitat:

Zitat von Kedariodakon

Wie gesagt, ich bin mir mit dieser Aussage nich wirklich sicher, bei Strings.

Zitat:

Zitat von Zerolith

Das klingt interessant. Ist es möglich vor dem Durchlaufen der gesamten datei festzustellen wieviele Zeilen drin sind?

Word für Word auf #13#10 überprüfen oder besser gleich auf $0d0a und die dann zählen...
Vorrausgesetzt, es ist keine Datei im Unicode-Format...

Bye

Nur so oder? dauert das nicht etwas lang?


auf jeden fall Danke - werde das Array von vornherein festlegen