Discussion :

[Patrice Henrio]

J'ai lu avec attention la discussion suivante
http://www.developpez.net/forums/d1182860/bases-donnees/langage-sql/dedoublonnage-remplacement-cles-etrangeres/
Mon problème s'en rapproche mais je n'y arrive pas.
Le problème vient de ce que les doublons portent sur deux colonnes L1 et L2.
T1 (pk,L1,L2)
et T2(id,fk)
fk renvoie à la table T1
Je cherche à faire comme dans la discussion une table de correspondance mais je n'y arrive pas.
Pour mémoire voici ce qui était proposé dans la discussion sus-citée

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
CREATE TEMP TABLE correpondances AS 
SELECT reference.id, toreplace.pk 
FROM (SELECT MIN(pk) AS id, val FROM T1 GROUP BY val HAVING count(*) > 1) AS reference 
INNER JOIN T1 AS toreplace ON reference.val=toreplace.val 
WHERE reference.id <> toreplace.pk

Mais pour moi val c'est le couple L1,L2, comment faire ?

[punkoff]

Bonjour,

Replacer val par le couple L1, L2 ?

Avez-vous compris le fonctionnement de la sous-requête ?

[Arkhena]

Voilà comment faire :
- Dans la sous-requête, on remplace val par L1, L2
- Dans la jointure, il faut mettre les 2 conditions

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
CREATE TEMP TABLE correpondances AS 
SELECT reference.id, toreplace.pk 
FROM (SELECT MIN(pk) AS id, L1, L2 FROM T1 GROUP BY L1, L2 HAVING count(*) > 1) AS reference 
INNER JOIN T1 AS toreplace ON reference.L1=toreplace.L1 AND reference.L2=toreplace.L2
WHERE reference.id <> toreplace.pk

[Patrice Henrio]

Bonjour,

Replacer val par le couple L1, L2 ?

Avez-vous compris le fonctionnement de la sous-requête ?

Oui je pense l'avoir compris.

En fait ce que j'ai compris depuis, à la suite d'essais, c'est que c'est très long même pour une table qui me paraissait petite (50000 lignes). Un de mes essais moins complexe que celui là (utilisant une seule colonne au lieu de 2 met 13 minutes à sortir un résultat;

[Patrice Henrio]

Voilà comment faire :
- Dans la sous-requête, on remplace val par L1, L2
- Dans la jointure, il faut mettre les 2 conditions

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
CREATE TEMP TABLE correpondances AS 
SELECT reference.id, toreplace.pk 
FROM (SELECT MIN(pk) AS id, L1, L2 FROM T1 GROUP BY L1, L2 HAVING count(*) > 1) AS reference 
INNER JOIN T1 AS toreplace ON reference.L1=toreplace.L1 AND reference.L2=toreplace.L2
WHERE reference.id <> toreplace.pk

Je teste et je te dis.

[punkoff]

50k lignes c'est vraiment petit, L1 et L2 c'est quoi comme type de donnée ?

[Patrice Henrio]

50k lignes c'est vraiment petit, L1 et L2 c'est quoi comme type de donnée ?

Ce sont des décimaux(5,2) et j'utilise H2 comme SGBD. Et là ça a mis un peu plus de 12 minutes de traitement.

[Patrice Henrio]

Voilà comment faire :
- Dans la sous-requête, on remplace val par L1, L2
- Dans la jointure, il faut mettre les 2 conditions

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
CREATE TEMP TABLE correpondances AS 
SELECT reference.id, toreplace.pk 
FROM (SELECT MIN(pk) AS id, L1, L2 FROM T1 GROUP BY L1, L2 HAVING count(*) > 1) AS reference 
INNER JOIN T1 AS toreplace ON reference.L1=toreplace.L1 AND reference.L2=toreplace.L2
WHERE reference.id <> toreplace.pk

ça a marché (12 minutes de traitement). En fait c'est ce que j'avais fait auparavant mais comme ça n'en finissait pas j'ai cru que je m'étais planté et je ne voyais pas où.