Datenbankabfrage dauert 13 Sekunden

[youuu]

Hallo,

ich beziehe ca. 4.000 Datensätze aus einer MySQL Tabelle, welche ca. 300.000 Datensätze aufweißt.
Allerdings dauert diese Abfrage 13 Sekunden.
Wie kann ich diese verbessern, ohne vorerst in der MySQL Tabelle selber rum zu fuchteln.

Hier die Abfrage:

Delphi-Quellcode:

  DSListe.TableName := '`links`,`kundendaten`';
  DSListe.FilterSQL := '(links.link_id = data.link_id) and (links.aufrufe <= 2) and (links.eintrag <> ''delete'') and ((links.date = date1) or (links.date = date2))';

DSListe = TUniTable.

[mkinzler]

Nimm besser ein Query. Den so werden alle 300000DS an den Client übertragen und dort gefiltert

[youuu]

Sollte eigentlich nicht, denn die Abfrage von UniTable sieht so aus

Delphi-Quellcode:

SELECT * FROM `links`,`kundendaten`
WHERE (links.link_id = data.link_id) and (links.aufrufe <= 2) and (links.eintrag <> ''delete'') and ((links.date = date1) or (links.date = date2))

[Bernhard Geyer]

Wie groß ist die Datenbanktabelle?
Gibt es Indexe auf die Where-Felder?
Wie viel Speicher (RAM) darf sich der Server "genehmigen"
Virenscanner für die DB-Dateien deaktiviert?

[Stevie]

Beinhalten die 13 Sekunden auch den Verbindungsaufbau zur Datenbank oder steht die schon vorher?
Nur bei der ersten Ausführung innerhalb einer Session oder jedesmal?

[generic]

Code:

SELECT * FROM `links`,`kundendaten`

Das ist ein kartesisches Produkt.

[DeddyH]

Ohne WHERE-Klausel wäre es das.

SQL-Code:

SELECT * FROM `links`,`kundendaten`
WHERE (links.link_id = data.link_id) ...

Allerdings gehe ich jetzt davon aus, dass es sich um einen C&P-Fehler handelt und data und kundendaten dasselbe sind.

[rollstuhlfahrer]

Schneller gehts dann nur mit JOINS. Die brauchen auch wesentlich weniger Server-Ressourcen. Das sieht dann so ähnlich aus:

SQL-Code:

SELECT * FROM `links` INNER JOIN `kundendaten`.`link_id` ON `links`.`link_id` WHERE (links.aufrufe <= 2) and (links.eintrag <> ''delete'') and ((links.date = date1) or (links.date = date2))

Bei deinen Abfragen war übrigens ein Fehler drinnen, der oben beseitigt ist. Wenn du die Tabelle Kundendaten meinst, dann darfst du nicht später diese Tabelle mit data ansprechen. Der MySql-Server sollte diese dann nicht finden. Es würde mich wundern, wenn du mit diesem Query mehr als 1 Ergebnis bekommst (nämlich das Syntax-Fehler-Ergebnis).

Bernhard

[mkinzler]

Zitat:

Schneller gehts dann nur mit JOINS.

Hat er doch, allerdings einen impliziten

[Bernhard Geyer]

Zitat:

Zitat von generic (Beitrag 1049851)

Code:

SELECT * FROM `links`,`kundendaten`

Das ist ein kartesisches Produkt.

MySQL sollte nicht zusammenbrechen wenn der JOIN im Where ((links.link_id = data.link_id) ) kommt.
Es ist aber sinnvoll die SQL-Join-Syntax zu verwenden.

[DeddyH]

Zitat:

Zitat von rollstuhlfahrer (Beitrag 1049854)

SQL-Code:

SELECT * FROM `links` INNER JOIN `kundendaten`.`link_id` ON `links`.`link_id`

Du meinst sicher

SQL-Code:

SELECT * FROM `links` L INNER JOIN `kundendaten` D ON L.`link_id` = D.`link_id`

[p80286]

Das wäre mir aber doch sehr neu, das ein JOIN schneller sein soll als ein where Tab1.id=tab2.id.

Wie groß ist denn ein Datensatz der hierdurch generiert wird?

Code:

SELECT * FROM `links`,`kundendaten`

Jedes Byte muß sich erst einmal über die Netzleitung quälen, und je mehr davon, desto langsamer!
Und was wird damit gemacht?
Die Anzeige von z.B. SQL+ ist so quälend langsam, daß jedes Ergebnis mit mehr als 1 Mb Größe zum Geduldsspiel wird. Da sind 13 Sekunden ein Klacks.

Gruß
K-H

[youuu]

Zitat:

Zitat von Bernhard Geyer (Beitrag 1049837)

Wie groß ist die Datenbanktabelle?
Gibt es Indexe auf die Where-Felder?
Wie viel Speicher (RAM) darf sich der Server "genehmigen"
Virenscanner für die DB-Dateien deaktiviert?

Entschuldigung gerade rst vom Radtraining zurück.

Die Tabelle "links" besitzt ca. 200.000 Datensätze (steigend)
Die Tabell "Daten" (KundenDaten) besitzt ca. 60.000 Datensätze, ebenfalls steigend.
(kundendaten und data wr allerdings nur ein Abtipp Fehler ins Forum also keiner im Programm)

Indexe auf link_id beider Tabellen.


Kein Virenscanner für die DB und der Server besitzt 8GB Arbeitsspeicher, die zur vollen Verfügung stehen.

Delphi-Quellcode:

DSListe.Open;

verbraucht die vollen 13 Sekunden

[youuu]

Zitat:

Zitat von p80286 (Beitrag 1049874)

Wie groß ist denn ein Datensatz der hierdurch generiert wird?

Code:

SELECT * FROM `links`,`kundendaten`

Enorm Zeit der Abfrage übersteigt die 2 Minuten, dann hab ich abgebrochen

[DeddyH]

Wie ist es so (ich habe allerdings keine Ahnung, was date1 und date2 sind)?

SQL-Code:

SELECT 
  * 
FROM 
  `links` L
JOIN 
  `kundendaten` D ON D.link_id = L.link_id
WHERE 
  L.aufrufe <= 2
  AND L.eintrag <> 'delete'
  AND L.date IN(date1,date2)

[youuu]

Ich habe jetzt die beiden anderen Felder auch indiziert in der mysql Tabelle und die Abfrage ist auf 3 Sek geschrumpft, normal oder immernoch zu hoch?

[youuu]

Delphi-Quellcode:

 AND L.date IN(date1,date2)

nun brauch die Abfrage nur noch 1,24 Sekunden.
Super, Danke

[DeddyH]

Brauchst Du wirklich alle Felder aus beiden Tabellen? Ich denke, eine Einschränkung auf die wirklich benötigten könnte auch noch etwas bringen.

[youuu]

werde ich gleich versuchen

[wicht]

Jau, ich hoffe mal ganz stark, dass das was noch etwas herausholt. Weil ein "Select *" heißt bei uns in der Firma einige Euros ins Abteilungs-Sparschwein...

[mkinzler]

Schlimmer wäre aber ein fehlendes/falsches where oder on

[wicht]

Das stimmt, aber hat ja andere (wohl noch schlimmere) Auswirkungen. Steht bei uns nicht auf der Dafür-muss-man-Strafe-zahlen-Liste, weil wir das für selbstverständlich ansehen :P

[DeddyH]

Sicherlich, aber zig unbenötigte Felder (womöglich noch inkl. BLOBs) übers Netzwerk zu schaufeln ist auch keine gute Idee.

[mkinzler]

Richtig mormalisierte Tabellen sollten eher klein sein.

[alzaimar]

Wie viele Zeilen hat das Resultat?
Sind datensensitive Steuerelemente angeschlossen, also ein DBGrid, DBEdits?

Ich sehe zu, das ich so 100-200 Datensätze in weniger als 500ms bekomme (inklusive Anzeige).

[youuu]

Also ich eralte nun 3600 Datensätze mit Anzeige in 1,7 Sekunden, da ich das alles in einem Thread laufen lasse, kann ich die 2 Sekunden mit einem Lade Screen überbrücken, Ich denke viel schneller wird es nicht mehr gehen.

[fkerber]

Hi,

eine andere Frage wäre, ob du alle 3600 Einträge auf einmal brauchst.
Das hängt halt auch davon ab, was du mit ihnen tun willst...


Liebe Grüße,
Frederic