Discussion :

[yohannd86]

Bonjour à tous !

Je suis perdu et m'en remets à vous concernant une difficulté rencontrée.

En effet, je constate dans une "View" (je suis sous sqlite studio), j'ai des données en double. Un "SELECT DISTINCT" ne me résout pas le problème entièrement.

Je souhaite, dans ma view, détecter les doublons et les supprimer tout en m'affichant mes données.

Voilà la requête de ma vue :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
SELECT distinct company,
                domain,
                indicator,
                detail_value AS site,
                strftime("%Y-%m", datetime) AS month,
                value
 FROM statistics
 WHERE dataset = 'is - sem - site summary' 
 AND instance IN ('Domain','domain')

statistics est une autre vue qui comporte la requête suivante :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
select 
	company.name as company, 
	domain.name as domain, 
	instance.name as instance, 
	CASE 
		WHEN instance.name like  "Site: %NAP id: 1" THEN 1
		WHEN instance.name like  "Site: %NAP id: 2" THEN 2
		ELSE NULL
	END as NAP,
	dataset.name as dataset, 
	indicator.name as indicator, 
	detail.name as detail_name,
	detail.value as detail_value,
	subdetail.name as subdetail_name,
	subdetail.value as subdetail_value,
	period.name as period,
	datetime,
	stat.value
from 
	dataset, 
	stat
	LEFT JOIN company on stat.company = company.id 
	LEFT JOIN domain on stat.domain = domain.id
	LEFT JOIN instance on stat.instance = instance.id
	LEFT JOIN indicator on stat.indicator = indicator.id
	LEFT JOIN detail on stat.detail = detail.id
	LEFT JOIN subdetail on stat.subdetail = subdetail.id
	LEFT JOIN period on stat.period = period.id
where
	stat.dataset = dataset.id

Sachant qu'il s'agit d'une imbrication de vues , je ne sais pas comment m'y prendre. De plus, il s'agit de doublons absolus.

Avez-vous une idée ?

Merci d'avance pour l'aide que vous pourrez m'apporter !

[tatayo]

Bonjour,
Peut-on avoir un jeu de test, le résultat attendu et le résultat renvoyé par la requête ?
Car un DISTINCT doit supprimer les lignes en double dans le résultat.

Tatayo.

[yohannd86]

Salut tatayo !

Merci pour ta réponse. Qu'entends-tu par "un jeu de test" ?

Pour ce qui est du reste :

La première vue citée me renvoie :

company company indicator site month value
cust1 cust1 \n\n\n mon_site 2019-03 0.0
cust1 cust1 value1 mon_site 2019-03 0.0
cust1 cust1 value2 mon_site 2019-03 0.0
cust1 cust1 value3 mon_site 2019-03 0.0
cust1 cust1 value4 mon_site 2019-03 0.0
cust1 cust1 value5 mon_site 2019-03 0.0
cust1 cust1 value6 mon_site 2019-03 138.0
cust1 cust1 value7 mon_site 2019-03 0.0
cust1 cust1 value8 mon_site 2019-03 0.0
cust1 cust1 value2 mon_site 2019-03 0,0
cust1 cust1 value3 mon_site 2019-03 0,0
cust1 cust1 value5 mon_site 2019-03 0,0
cust1 cust1 value6 mon_site 2019-03 138,0
cust1 cust1 value7 mon_site 2019-03 0,0
cust1 cust1 value8 mon_site 2019-03 0,0

Comme tu peux le constater, il y a 2 fois dans la colonne "indicator", value2 à value8.

Je souhaite donc qu'il n'y ait qu'une fois ces lignes.

Merci

[seabs]

Bonjour,

Pour supprimer le doublon, il doit s'agir d'un doublon. Or, dans la liste que tu as remise, il n'y a aucun doublon.

Exemple :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
 
cust1 cust1 value2 mon_site 2019-03 0.0
cust1 cust1 value2 mon_site 2019-03 0,0

Le 1er enregistrement est terminé par 0.0 et le second par 0,0. En résumé, dans l'un, tu as le point décimal et dans l'autre, tu as une virgule. De ce fait, ils sont différents et le DISTINCT présent dans ta requête ou dans ta vue ne changera rien.
Pour corriger, il faut commencer par rendre les lignes de données homogènes.
Bon courage.

[yohannd86]

Bonjour Seabs,

Oh punaise ! Je l'ai tellement relu que j'avais même pas vu ça !

Comment je peux "éliminer" ça du coup ?

Merci pour ton aide

[tatayo]

Je dirai qu'il faut faire du ménage dans les données.
Quelque que chose me dit que la colonne en question est de type chaine, alors que visiblement il s'agit de données numériques.

Tatayo.

[yohannd86]

Tu veux dire "nettoyer les bases" ?

En gros, je devrais :

* Changer le séparateur
* Supprimer les doublons
* Afficher les résultats

C'est à ça que tu penses ?

[acaumes]

Bonjour,

Tu es sous SQLITE donc tu peux essayer :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
SELECT distinct company,
                domain,
                indicator,
                detail_value AS site,
                strftime("%Y-%m", datetime) AS month,
                replace(value, '.', ',') as value    // On peut aussi bien mettre replace(value, ',', '.') as value selon sa préférence
 FROM statistics
 WHERE dataset = 'is - sem - site summary' 
 AND instance IN ('Domain','domain')

Je dirai qu'il faut faire du ménage dans les données.
Quelque que chose me dit que la colonne en question est de type chaine, alors que visiblement il s'agit de données numériques.

Tatayo.

Tu devrais regarder ce qu'il y a dans la colonne value de la table stat il semble que les données n'aient pas la forme qui convient selon leur définition.

Cordialement

[escartefigue]

Non seulement, comme mentionné par Tatayo, la colonne "value" est très probablement d'un type caractère, mais en plus, "value" est un mot réservé SQL, double peine donc

[yohannd86]

Merci à tous pour vos réponses.

J'ai l'impression que la solution est enfin trouvée :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

CAST( REPLACE( value , ',' , '.' ) as decimal ) as value

Cela fonctionne et mon "SELECT DISTINCT" efface bien mes doublons.

Qu'en pensez-vous ? Pas d'effets de bord indésirable à prévoir ?

Merci encore

[yohannd86]

Salut à tous !

Pas de réponse alors je pars du principe qu'il n'y en aura pas.

Merci pour votre aide !