schnellster Weg eine SQL-Datei zu bearbeiten

[lkz633]

Hallo,

ich habe eine riesige SQL Datei (ca. 300 MB) mit insert into Statements.
Diese muss ich in eine HTML Datei umwandeln.

Gibt es die Möglichkeit, eine fiktive Tabelle im Speicher zu erzeugen, darin lese ich die Datei ein und kann dann ganz normal mit tabelle.fieldbyname etc darauf zugreifen? Geht sowas, wenn ja, scheitert es an der Grösse der Datei/insert intos?

Ich wollte mir halt die Mühe ersparen, die Datei zu parsen.

Was wird vermutlich schneller gehen, parsen oder in eine Tabelle einfügen?
Irgendwelche sonstigen Tipps?

Danke und Gruss
lkz633

[Hansa]

Meinst Du vielleicht ein SQL Script ?? Oder die Metadaten-Definitionen, oder die Datenbank an sich ?? Oder wie oder was ?? Ist mir zu hoch. 8) Welche Datenbank ist das überhaupt ?

[Robert_G]

300MB :shock:
Was für eine DB benutzt du denn? Normalerweise geibt es für die "richtigen" Datenbanken Import/Export Möglichkeiten, die ohne die SQL Engine auskommen.
Zum Bleistift Oracle's Direct Path loading.

[lkz633]

Hallo,

es handelt sich um einen SQL Dump, aus dem ich HTML Seiten erzeugen möchte.

Gruss lkz633

[Hansa]

ohne Angabe der Datenbank läßt sich wohl nichts machen. Ist das nicht möglich und die Daten sind aus dem Nichts gekommen, so bleibt Dir wohl nichts anderes übrig, als zeilenweise alles nötige auszulesen / auszufiltern. 300 MB ist nicht die Welt. In der DB sinds dann so um die 50 MB, eher weniger. Hab ich auch schon durchgezogen. Wichtiger, als die MB sind aber IMHO die Anzahl der Zeilen.

Aber, was hat das mit html zu tun. Was soll da rauskommen ? Sind die Zeilen einheitlich, oder Kraut und Rüben ? CSV oder fest ? :gruebel:

[lkz633]

Es handelt sich um einen SQL dump von Wikimedia

Es gibt ein Perl Script, was daraus HTMl Seiten, also eine Art Enyolzpedia erstellen kann, das soll halt nun auch mit Delphi passieren.

Deswegen die Frage, ob eine In Memory Tabelle schneller ist oder die Datei parsen schneller ist

lkz633

[Robert_G]

Könntest du 2-3 Zeilen als Anhang hochladen?
Dann könnte ich mir (bzw. alle anderen) besser ausmalen wovon du da sprichst. :wink:

[Chewie]

Er meint wohl einen Dump der kompletten Datenbank als CREATE DATABASE, CREATE TABLE und INSERT-Statements.

[Robert_G]

Als dump (*.dmp-datei) kenne ich z.Bsp. die Import/Export-dateien von Oracle, die ohne SQL engine auskommen, wobei eine 300MB Datei in unter 10 sek. drin ist.
Er meint mit Dump aber wahrscheinlich eine ewig lange Liste von SQL-Statements.
Wegen dem "wahscheinlich" fragte ich nach den ersten paar Zeilen.

[lkz633]

Ja, es ist genauso wie vermutet.

Ein create statement fuer die Tabelle, danach nur noch insert into statements.
habe jetzt erfahren, das das mitt einem Clientdataset gehen soll.

Hat jemand mit SQL schonmal damit eine Tabelle erstellt? Ich habe es nicht hinbekommen.

lkz633