Lenteur d'une requete Not exists : syntaxe SQL ou mauvaise conception de table ?

Bonjour,

Je débute sous Wamp et je cherche à faire une surveillance de performance de scanner d'ordonnance.

Chaque nuit mon script php parcours toutes les ordonnances et crée une table temporaire contenant les ordo des 6 derniers jours : tmp_SO_Dem_Inlog.
Je lance le script chaque nuit à J-6 pour éviter de perdre des ordo le jour où le script ne sera pas lancé pour X raisons.
Sur cette table temporaire, seul le dernier jour sera intégré à la table définitive, la plupart du temps.

Une table liste les ordonnances définitives SO_Dem_Inlog.

Chaque jour donc j'alimente la table définitive des seules nouvelles demandes contenues dans la table temporaire.

Je réalise donc une requête pour trouver le delta et boucle ensuite par une requête insert pour alimenter la table définitive SO_Dem_Inlog :

Code:

---

select DEMANDE, SOMME_SO from tmp_SO_Dem_Inlog where not exists (select 1 from SO_Dem_Inlog where tmp_SO_Dem_Inlog.DEMANDE=SO_Dem_Inlog.DEMANDE)

---

Je m’aperçois que cette requête de non existence des ordo est de plus en plus longue (ordre d'idée : 30 minutes) : la table définitive contient 100000 lignes et la temporaire 10000 environ.
Ci dessous la structure ainsi que les données pour tester au besoin.
Pièce jointe 402188

Je ne sais pas si je dois revoir la structure de mes tables, optimiser avec des index ou revoir ma syntaxe sql...

Merci d'avance

J'ai cru avoir résolu ce problème en créant des index... je me suis trompé.

Citation:

---

Envoyé par pypeseux

Je réalise donc une requête pour trouver le delta et boucle ensuite par une requête insert pour alimenter la table définitive SO_Dem_Inlog

---

C'est ambigüe, est-ce que ça veut dire une boucle avec un INSERT INTO VALUES dedans ?

Si oui, il faut faire un INSERT INTO SELECT :

Code:

---

1 2 3 4 5 6

insert into SO_Dem_Inlog (....) select DEMANDE, SOMME_SO , ... from tmp_SO_Dem_Inlog where not exists (select 1 from SO_Dem_Inlog where tmp_SO_Dem_Inlog.DEMANDE = SO_Dem_Inlog.DEMANDE)

---

PS : Pour la structure des tables et index, merci de préférer un post direct dans le forum avec la balise code plutôt qu'un fichier joint.

Bonjour,

Votre solution m'a effectivement bien simplifié le code, et j'ai nettement amélioré mes performances...
J'ai ajouté également ajouté un index... tout est OK

Merci beaucoup

Vous pouvea aussi récrire votre requête sous la forme d'une semi anti jointure :

Code:

---

1 2 3 4 5

select DEMANDE, SOMME_SO from tmp_SO_Dem_Inlog AS SO1 LEFT OUTER JOIN SO_Dem_Inlog.DEMANDE AS SO2 ON SO1.DEMANDE=SO2.DEMANDE where S02.DEMANDE IS NULL;

---

Voire en utilisant l'opérateur ensembliste EXCEPT...

mais le plus important reste l'indexation de TOUTES les tables, y compris les tables temporaires !

Apprenez le langage SQL. Mon site web comme mon livre peuvent vous y aider...

A +