IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Langage SQL Discussion :

[T-SQL] Optimisation requête


Sujet :

Langage SQL

  1. #1
    Membre confirmé
    Homme Profil pro
    Développeur informatique
    Inscrit en
    Mars 2017
    Messages
    176
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 44
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Développeur informatique
    Secteur : Conseil

    Informations forums :
    Inscription : Mars 2017
    Messages : 176
    Par défaut [T-SQL] Optimisation requête
    Bonjour,

    Je voudrais savoir comment je pourrais optimiser la requête ci-dessous qui me retourne les lignes modifiées entre deux traitements.

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    SELECT *
    FROM emp t1
    JOIN emp t2
    ON t1.col1=t2.col1
    AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND (t1.col4 <> t2.col4 or t1.col5 <> t2.col5 or t1.col6 <> t2.col6 or t1.col7 <> t2.col7)
    Merci.

  2. #2
    Expert confirmé
    Avatar de StringBuilder
    Homme Profil pro
    Chef de projets
    Inscrit en
    Février 2010
    Messages
    4 199
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 47
    Localisation : France, Rhône (Rhône Alpes)

    Informations professionnelles :
    Activité : Chef de projets
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Février 2010
    Messages : 4 199
    Billets dans le blog
    1
    Par défaut
    Tu peux essayer de faire ça :
    Code sql : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
     
    select col1, col2, col4, col5, col6, col7
    from emp
    where col3 = 1
    except
    select col1, col2, col4, col5, col6, col7
    from emp
    where col3 = 2
    Cela te retournera toutes les lignes pour col3 = 1 qui n'ont pas de ligne avec col3 = 2 dont les colonnes col1, col2, col4, col5, col6 et col7 sont identiques.

    Pas certain que ce soit plus rapide cependant.

  3. #3
    Expert confirmé
    Homme Profil pro
    Responsable Données
    Inscrit en
    Janvier 2009
    Messages
    5 559
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 52
    Localisation : France, Hérault (Languedoc Roussillon)

    Informations professionnelles :
    Activité : Responsable Données

    Informations forums :
    Inscription : Janvier 2009
    Messages : 5 559
    Par défaut
    Bonjour,
    Pour moi les deux requêtes ne sont pas identiques.
    Dans la première, pour qu'une ligne de emp avec col3 = 1 soit renvoyée, il faut qu'il existe une ligne de emp avec col3 = 2 et une correspondance des colonnes col1 et col2 et une valeur différente dans au moins une colonne col4, col5, col6 ou col7.
    Avec la deuxième requête, une ligne de emp avec col3 = 1 sera renvoyée s'il n'existe pas une autre ligne avec col3 = 2 et les autres colonnes identiques.

    Donc si je prends l'exemple d'une ligne de emp avec col3 = 1 et aucune autre ligne ayant les mêmes valeurs dans col1 et col2 pour col3 = 2, la première requête ne renvoie pas la ligne, la deuxième oui.

    Tatayo.

  4. #4
    Modérateur
    Avatar de escartefigue
    Homme Profil pro
    bourreau
    Inscrit en
    Mars 2010
    Messages
    10 772
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Loir et Cher (Centre)

    Informations professionnelles :
    Activité : bourreau
    Secteur : Finance

    Informations forums :
    Inscription : Mars 2010
    Messages : 10 772
    Billets dans le blog
    10
    Par défaut
    Bonjour,

    Quelques remarques et questions

    • si la colonne 3 est un chrono traitement, alors tester "en dur" la valeur 1 ou 2 n'est pas une solution pérenne.
    • n'y a -t-il pas des mouchards de mise à jour dans cette table (horodatage) ?
    • quel est le volume approximatif de cette table ?

  5. #5
    Membre confirmé
    Homme Profil pro
    Développeur informatique
    Inscrit en
    Mars 2017
    Messages
    176
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 44
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Développeur informatique
    Secteur : Conseil

    Informations forums :
    Inscription : Mars 2017
    Messages : 176
    Par défaut
    En fait je lance un traitement de chargement de données dans une table. La colonne col3 est une colonne qui s'incrémente avec chaque chargement.

    Ce que je cherche à faire c'est de retourner toutes les différences entre deux chargements ou de préférence retourner toutes les lignes (en se basant sur les colonnes citées précédemment) et rajouter une colonne qui va contenir une valeur ou un flag informant qu'il s'agit d'une ligne modifiée.

  6. #6
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    22 039
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 22 039
    Billets dans le blog
    6
    Par défaut
    Testez :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    SELECT *
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col4 <> t2.col4
    UNION ALL
    SELECT *
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col5 <> t2.col5
    UNION ALL
    SELECT *
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col6 <> t2.col6
    UNION ALL
    SELECT *
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col7 <> t2.col7)
    Et avec les bon index… :
    X1 ON T1 (COL3, COL1, COL2, COL4)
    X2 ON T1 (COL3, COL1, COL2, COL5)
    X3 ON T1 (COL3, COL1, COL2, COL6)
    X4 ON T1 (COL3, COL1, COL2, COL7)

    A +
    Frédéric Brouard - SQLpro - ARCHITECTE DE DONNÉES - expert SGBDR et langage SQL
    Le site sur les SGBD relationnels et le langage SQL: http://sqlpro.developpez.com/
    Blog SQL, SQL Server, SGBDR : http://blog.developpez.com/sqlpro
    Expert Microsoft SQL Server - M.V.P. (Most valuable Professional) MS Corp.
    Entreprise SQL SPOT : modélisation, conseils, audit, optimisation, formation...
    * * * * * Expertise SQL Server : http://mssqlserver.fr/ * * * * *

  7. #7
    Membre confirmé
    Homme Profil pro
    Développeur informatique
    Inscrit en
    Mars 2017
    Messages
    176
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 44
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Développeur informatique
    Secteur : Conseil

    Informations forums :
    Inscription : Mars 2017
    Messages : 176
    Par défaut
    Merci pour la solution que vous proposez.

    Cependant, je n'ai pas compris pourquoi vous parlez d'index. La requête retourne le même nombre de lignes que ma requête de départ. J'aurai voulu afficher si possible toutes les lignes dont col3 = 1 et 2 et afficher dans une colonne supplémentaire la valeur 'N' pour dire qu'elle n'est pas modifiée et 'M' pour dire que c'est modifié (ex: select *, 'M')

    Citation Envoyé par SQLpro Voir le message
    Testez :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    SELECT *
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col4 <> t2.col4
    UNION ALL
    SELECT *
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col5 <> t2.col5
    UNION ALL
    SELECT *
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col6 <> t2.col6
    UNION ALL
    SELECT *
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col7 <> t2.col7)
    Et avec les bon index… :
    X1 ON T1 (COL3, COL1, COL2, COL4)
    X2 ON T1 (COL3, COL1, COL2, COL5)
    X3 ON T1 (COL3, COL1, COL2, COL6)
    X4 ON T1 (COL3, COL1, COL2, COL7)

    A +
    Je voudrais pouvoir rajouter 2 union all comme ceci :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    SELECT *, 'M'
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col4 <> t2.col4
    UNION ALL
    SELECT *, 'M'
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col5 <> t2.col5
    UNION ALL
    SELECT *, 'M'
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col6 <> t2.col6
    UNION ALL
    SELECT *, 'M'
    FROM   emp t1 
          JOIN emp t2 ON t1.col1=t2.col1
                         AND t1.col2=t2.col2
    AND t1.col3 = 1
    AND t2.col3 = 2
    AND t1.col7 <> t2.col7)
    UNION ALL
    SELECT *, 'N'
    FROM   emp
    WHERE col3 = 1
    UNION ALL
    SELECT *, 'N'
    FROM   emp
    WHERE col3 = 2

  8. #8
    Membre confirmé
    Homme Profil pro
    Développeur informatique
    Inscrit en
    Mars 2017
    Messages
    176
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 44
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Développeur informatique
    Secteur : Conseil

    Informations forums :
    Inscription : Mars 2017
    Messages : 176
    Par défaut
    Bonjour,

    J'ai fait comme ceci :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
     
    SELECT a.*,
        CASE WHEN a.col4 <> b.col4 or a.col5 <> b.col5 or a.col6 <> b.col6 or a.col7 <> b.col7 THEN 'TRUE' ELSE 'FALSE' END AS ETAT
    FROM emp a
    INNER JOIN emp b ON a.col1 = b.col1 and a.col2=b.col2
    WHERE a.col3 = 1
    AND b.col3 = 2
    UNION ALL
    SELECT b.*, 'FALSE'
    FROM emp a
    INNER JOIN emp b ON a.col1 = b.col1 and a.col2=b.col2
    WHERE a.col3 = 1
    AND b.col3 = 2
    ça a l'air de fonctionner.

  9. #9
    Modérateur

    Profil pro
    dba
    Inscrit en
    Janvier 2010
    Messages
    5 643
    Détails du profil
    Informations personnelles :
    Localisation : France, Rhône (Rhône Alpes)

    Informations professionnelles :
    Activité : dba

    Informations forums :
    Inscription : Janvier 2010
    Messages : 5 643
    Par défaut
    Bonjour,

    Vous pouvez aussi essayer avec LEAD/LAG

    dans ce genre là (pas testé), sans doute à adapter :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
     
    SELECT *, CASE WHEN (col4 <> LEAD(col4) OVER(PARTITION BY col1,col2 ORDER BY Col3) or col5 <> LEAD(col5) OVER(PARTITION BY col1,col2 ORDER BY Col3) or col6 <> LEAD(col6) OVER(PARTITION BY col1,col2 ORDER BY Col3) or col7 <> LEAD(col7) OVER(PARTITION BY col1,col2 ORDER BY Col3) THEN 'TRUE' ELSE 'FALSE' END AS ETAT
    FROM emp

  10. #10
    Modérateur
    Avatar de Waldar
    Homme Profil pro
    Sr. Specialist Solutions Architect @Databricks
    Inscrit en
    Septembre 2008
    Messages
    8 454
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 48
    Localisation : France, Val de Marne (Île de France)

    Informations professionnelles :
    Activité : Sr. Specialist Solutions Architect @Databricks
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Septembre 2008
    Messages : 8 454
    Par défaut
    La solution la plus performante sera probablement celle-ci :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
      select col1, col2, col4, col5, col6, col7
           , min(col3), max(col3)
        from emp
       where col3 in (1, 2)
    group by col1, col2, col4, col5, col6, col7
      having min(col3) = max(col3)
    order by 1, 2, 3, 4, 5, 6, 7;
    En cas de donnée qui change, vous aurez deux lignes alors qu'avec des jointures vous rajoutez des colonnes donc à voir si ça vous convient.

  11. #11
    Membre confirmé
    Homme Profil pro
    Développeur informatique
    Inscrit en
    Mars 2017
    Messages
    176
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 44
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Développeur informatique
    Secteur : Conseil

    Informations forums :
    Inscription : Mars 2017
    Messages : 176
    Par défaut
    Merci à tous pour les solutions proposées.

    Votre solution est intéressante mais je souhaiterai afficher toutes les colonnes de la table et afficher en plus une colonne qui va contenir la valeur true pour toutes lignes modifiées à savoir la ligne avec les valeurs initiales et la ligne contenant les valeurs modifiées et la valeur false pour toutes les lignes qui n'ont connu aucune modification.

  12. #12
    Membre confirmé
    Homme Profil pro
    Développeur informatique
    Inscrit en
    Mars 2017
    Messages
    176
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 44
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Développeur informatique
    Secteur : Conseil

    Informations forums :
    Inscription : Mars 2017
    Messages : 176
    Par défaut
    La fonction LEAD n'est pas reconnue sur SQL Server 2008.

    Cependant j'ai comme ceci et ça a l 'air de fonctionner :


    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    SELECT a.*,
        CASE WHEN a.col4 <> b.col4 or a.col5 <> b.col5 or a.col6 <> b.col6 or a.col7 <> b.col7 THEN 'TRUE' ELSE 'FALSE' END AS ETAT
    FROM emp a
    INNER JOIN emp b ON a.col1 = b.col1 and a.col2=b.col2
    WHERE a.col3 = 1
    AND b.col3 = 2
    UNION ALL
    SELECT b.*, CASE WHEN a.col4 <> b.col4 or a.col5 <> b.col5 or a.col6 <> b.col6 or a.col7 <> b.col7 THEN 'TRUE' ELSE 'FALSE' END AS ETAT
    FROM emp a
    INNER JOIN emp b ON a.col1 = b.col1 and a.col2=b.col2
    WHERE a.col3 = 1
    AND b.col3 = 2
    order by order by a.col1
    Une solution plus optimisée à proposer ?

  13. #13
    Modérateur

    Profil pro
    dba
    Inscrit en
    Janvier 2010
    Messages
    5 643
    Détails du profil
    Informations personnelles :
    Localisation : France, Rhône (Rhône Alpes)

    Informations professionnelles :
    Activité : dba

    Informations forums :
    Inscription : Janvier 2010
    Messages : 5 643
    Par défaut
    2008 ou 2008 R2 ?, non en fait je crois que ROW_NUMER est disponible dés la version 2005

    vous pouvez donc "émuler" le fonction de LEAD et LAG avec ROW_NUMBER.

    J'avais donné un exemple avec dans ce post


    Cela dit, vous pouvez aussi repartir de la requête de Waldar, a mettre en sous requete avec une jointure dessus pour retrouver les informations des autres colones...

Discussions similaires

  1. [SQL] Optimisation de requêtes
    Par emile13 dans le forum PHP & Base de données
    Réponses: 4
    Dernier message: 26/08/2007, 21h48
  2. [PL/SQL] Optimisation d'une requête (like?)
    Par elyo66 dans le forum SQL
    Réponses: 15
    Dernier message: 01/06/2007, 19h44
  3. optimisation requête SQL
    Par marti dans le forum Oracle
    Réponses: 4
    Dernier message: 27/04/2006, 08h54
  4. Besoin d'aide pour optimiser requête SQL
    Par Keuf95 dans le forum Langage SQL
    Réponses: 10
    Dernier message: 06/09/2005, 16h02
  5. optimisation requête SQL!!! help!!
    Par anathem62 dans le forum Requêtes
    Réponses: 2
    Dernier message: 24/05/2004, 16h26

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo