IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Requêtes PostgreSQL Discussion :

[POSTGRES] UNION => baisse de performances


Sujet :

Requêtes PostgreSQL

  1. #1
    Membre averti
    Profil pro
    Inscrit en
    Février 2006
    Messages
    45
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Février 2006
    Messages : 45
    Par défaut [POSTGRES] UNION => baisse de performances
    Bjr,

    Voila, je constate une baisse de performance importante suite à l'ajout d'un UNION dans une vue.

    J'ai initialement une vue de la manière suivante :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    SELECT a,b,c FROM table1, table2 WHERE jointure et conditions
    résultat : 150 000 enregistrements.
    performance : 1~2 secondes.

    Puis dans cette vue j'ajoute un UNION vers une autre table contenant les mêmes colonnes

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    SELECT a,b,c FROM table1, table2 WHERE jointure et conditions 
    UNION
    SELECT a,b,c FROM table3
    résultat : 152 000 enregistrements.
    performance : 7~8 secondes
    .

    Pour 2000 enregistrements de plus, présents dans la table3, je quadruple les temps de réponses!

    Avez-vous déjà constaté cela? Existe-il une manipulation pour optimiser la requête?

    Thanks

    SGBD : Postgres 8.3 et 8.4

  2. #2
    Modérateur

    Profil pro
    dba
    Inscrit en
    Janvier 2010
    Messages
    5 643
    Détails du profil
    Informations personnelles :
    Localisation : France, Rhône (Rhône Alpes)

    Informations professionnelles :
    Activité : dba

    Informations forums :
    Inscription : Janvier 2010
    Messages : 5 643
    Par défaut
    Bonjour

    Deja, vous pouvez utiliser JOIN pour effectuer votre jointure.

    Ensuite, combien de lignes vous renvoi la deuxième requete seule (et quel temps d'exécution) ?

    enfin, que donne votre requete avec un UNION ALL au lieu d'un simple UNION ?

  3. #3
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    22 002
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 22 002
    Billets dans le blog
    6
    Par défaut
    L'opérateur ensembliste UNION dédoublonne les lignes. Cette opération est compliquée par le fait que les lignes peuvent être longues.
    Pour l'accélérer vous devez envisager différentes hypothèses :
    Avez vous besoin du dédoublonnement ?
    a) si non, alors mettez un UNION ALL
    b) si oui, indexez toutes les colonnes des deux tables

    A +
    Frédéric Brouard - SQLpro - ARCHITECTE DE DONNÉES - expert SGBDR et langage SQL
    Le site sur les SGBD relationnels et le langage SQL: http://sqlpro.developpez.com/
    Blog SQL, SQL Server, SGBDR : http://blog.developpez.com/sqlpro
    Expert Microsoft SQL Server - M.V.P. (Most valuable Professional) MS Corp.
    Entreprise SQL SPOT : modélisation, conseils, audit, optimisation, formation...
    * * * * * Expertise SQL Server : http://mssqlserver.fr/ * * * * *

  4. #4
    Membre éclairé
    Profil pro
    Inscrit en
    Octobre 2009
    Messages
    70
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2009
    Messages : 70
    Par défaut
    Effectivement le problème semble se trouver du côté du UNION comme dit par SQLPro.

    Note que sur postgres des index supplémentaires ne te serviront à rien pour accélérer un UNION.

    Je trouve tes timings relativement suspects car pour arriver à 8 secondes en dédoublonnant 150.000 lignes, les lignes doivent être énormes (avec des ints ça prend 0.2s) ou bien la requête que tu as collé n'est pas vraiment représentative de ton cas (petit cachottier).

    Poste un EXPLAIN ANALYZE.

  5. #5
    Rédacteur

    Avatar de SQLpro
    Homme Profil pro
    Expert bases de données / SQL / MS SQL Server / Postgresql
    Inscrit en
    Mai 2002
    Messages
    22 002
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Var (Provence Alpes Côte d'Azur)

    Informations professionnelles :
    Activité : Expert bases de données / SQL / MS SQL Server / Postgresql
    Secteur : Conseil

    Informations forums :
    Inscription : Mai 2002
    Messages : 22 002
    Billets dans le blog
    6
    Par défaut
    Citation Envoyé par peufeu Voir le message
    Note que sur postgres des index supplémentaires ne te serviront à rien pour accélérer un UNION.
    faux... Si les index sont couvrant, cela évite de lire la table et servira au dédoublonnage !

    A +
    Frédéric Brouard - SQLpro - ARCHITECTE DE DONNÉES - expert SGBDR et langage SQL
    Le site sur les SGBD relationnels et le langage SQL: http://sqlpro.developpez.com/
    Blog SQL, SQL Server, SGBDR : http://blog.developpez.com/sqlpro
    Expert Microsoft SQL Server - M.V.P. (Most valuable Professional) MS Corp.
    Entreprise SQL SPOT : modélisation, conseils, audit, optimisation, formation...
    * * * * * Expertise SQL Server : http://mssqlserver.fr/ * * * * *

  6. #6
    Membre éclairé
    Profil pro
    Inscrit en
    Octobre 2009
    Messages
    70
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2009
    Messages : 70
    Par défaut
    Citation Envoyé par SQLpro Voir le message
    faux... Si les index sont couvrant, cela évite de lire la table et servira au dédoublonnage !
    En fait postgres ne gère pas (encore) l'utilisation d'un index seul sans toucher à la table...

  7. #7
    Membre extrêmement actif
    Avatar de kedare
    Homme Profil pro
    SRE
    Inscrit en
    Juillet 2005
    Messages
    1 549
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : Espagne

    Informations professionnelles :
    Activité : SRE

    Informations forums :
    Inscription : Juillet 2005
    Messages : 1 549
    Par défaut
    Citation Envoyé par peufeu Voir le message
    En fait postgres ne gère pas (encore) l'utilisation d'un index seul sans toucher à la table...
    Je crois pas que ca le gère un jour, c'est pas prévu d'ajouter cette fonctionnalité car ca apporterais de trop gros inconvenants.

Discussions similaires

  1. Macbook baisse de performance / #4 chercher l'erreur?
    Par Philp974 dans le forum Mac OS X
    Réponses: 3
    Dernier message: 01/11/2011, 13h42
  2. GLSL - Cast et baisse de performances
    Par coda_blank dans le forum OpenGL
    Réponses: 4
    Dernier message: 02/08/2010, 23h21
  3. Vista 64bits, son altéré et baisse de performance
    Par Busybeno8 dans le forum Windows Vista
    Réponses: 0
    Dernier message: 09/09/2009, 20h16
  4. Event.observe baisse de performance ?
    Par Promesses dans le forum Général JavaScript
    Réponses: 24
    Dernier message: 16/06/2008, 09h09
  5. Réponses: 8
    Dernier message: 11/04/2006, 13h58

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo