Discussion :

[pypeseux]

Bonjour,

Je débute sous Wamp et je cherche à faire une surveillance de performance de scanner d'ordonnance.

Chaque nuit mon script php parcours toutes les ordonnances et crée une table temporaire contenant les ordo des 6 derniers jours : tmp_SO_Dem_Inlog.
Je lance le script chaque nuit à J-6 pour éviter de perdre des ordo le jour où le script ne sera pas lancé pour X raisons.
Sur cette table temporaire, seul le dernier jour sera intégré à la table définitive, la plupart du temps.

Une table liste les ordonnances définitives SO_Dem_Inlog.

Chaque jour donc j'alimente la table définitive des seules nouvelles demandes contenues dans la table temporaire.

Je réalise donc une requête pour trouver le delta et boucle ensuite par une requête insert pour alimenter la table définitive SO_Dem_Inlog :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

select DEMANDE, SOMME_SO from tmp_SO_Dem_Inlog where not exists (select 1 from SO_Dem_Inlog where tmp_SO_Dem_Inlog.DEMANDE=SO_Dem_Inlog.DEMANDE)

Je m’aperçois que cette requête de non existence des ordo est de plus en plus longue (ordre d'idée : 30 minutes) : la table définitive contient 100000 lignes et la temporaire 10000 environ.
Ci dessous la structure ainsi que les données pour tester au besoin.
Desktop.7z

Je ne sais pas si je dois revoir la structure de mes tables, optimiser avec des index ou revoir ma syntaxe sql...

Merci d'avance

[pypeseux]

J'ai cru avoir résolu ce problème en créant des index... je me suis trompé.

[skuatamad]

Je réalise donc une requête pour trouver le delta et boucle ensuite par une requête insert pour alimenter la table définitive SO_Dem_Inlog

C'est ambigüe, est-ce que ça veut dire une boucle avec un INSERT INTO VALUES dedans ?

Si oui, il faut faire un INSERT INTO SELECT :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
insert into SO_Dem_Inlog (....)
select DEMANDE, SOMME_SO , ...
  from tmp_SO_Dem_Inlog 
 where not exists (select 1 
                     from SO_Dem_Inlog 
                    where tmp_SO_Dem_Inlog.DEMANDE = SO_Dem_Inlog.DEMANDE)

PS : Pour la structure des tables et index, merci de préférer un post direct dans le forum avec la balise code plutôt qu'un fichier joint.

[pypeseux]

Bonjour,

Votre solution m'a effectivement bien simplifié le code, et j'ai nettement amélioré mes performances...
J'ai ajouté également ajouté un index... tout est OK

Merci beaucoup

[SQLpro]

Vous pouvea aussi récrire votre requête sous la forme d'une semi anti jointure :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
select DEMANDE, SOMME_SO 
from   tmp_SO_Dem_Inlog AS SO1
       LEFT OUTER JOIN SO_Dem_Inlog.DEMANDE AS SO2
            ON SO1.DEMANDE=SO2.DEMANDE  
where  S02.DEMANDE IS NULL;

Voire en utilisant l'opérateur ensembliste EXCEPT...

mais le plus important reste l'indexation de TOUTES les tables, y compris les tables temporaires !

Apprenez le langage SQL. Mon site web comme mon livre peuvent vous y aider...

A +