Delphi-PRAXiS - Delphi Große Logfiles analysieren

Delphi-PRAXiS (https://www.delphipraxis.net/forum.php)

- Object-Pascal / Delphi-Language (https://www.delphipraxis.net/32-object-pascal-delphi-language/)

- - Delphi Große Logfiles analysieren (https://www.delphipraxis.net/21670-grosse-logfiles-analysieren.html)

Große Logfiles analysieren

Hi Xperts,

nach welchem Prinzip analysiert ihr große Log-Dateien ?

Ich möchte eine kleine Auswertung für die Squid Access-Log Datei schreiben. Z.Z. lade ich die access.log in eine Stringliste und formatiere sie (Unix-Datumsformat umrechenen und uninteressante Infos löschen).
Bei ca. 50.000 Einträgen dauert es eine ganze Weile (je nach Rechnerleistung 5-10 Min). Die Formatierung ist auch noch nicht das Problem und könnte sicherlich noch optimiert werden.

Als Test-Beispiel habe ich jetzt eine access.log von 350MB !!!! Ich glaube das das generell ein wenig die SL´s überfordern könnte.
Tools wie der Webalizer machen das irgendwie viel schneller...nur wie ?

THX
für die Hilfe !

Re: Große Logfiles analysieren

Zitat:

Zitat von novelly

Tools wie der Webalizer machen das irgendwie viel schneller...nur wie ?

Die laden die Loginformationen zeilenweise und analysieren immer nur die aktuelle Zeile. Dann erstellen die Hier im Forum suchen

Hash-Trees und arbeiten damit ;)

...:cat:...