Algorithme Ou Methode de correction (Urgent)

Version imprimable

05/08/2007, 19h02
riyahi

Algorithme Ou Methode de correction (Urgent)

Dans une base de donne une table contienne des clients de cette façon

______________________________
Agent notionnelle du crédit
______________________________
ANC
______________________________
A.N.C
______________________________
Agent notionnelle du crédit(ANC)
______________________________
Agent notionnelle du crédit(A.N.C)
______________________________
A N C
______________________________
Agent notionnelle du crédit(A N C)
______________________________

Y-a-il des algorithmes permet de détecte ses nom, pour les corriger?
Merci d’avance
06/08/2007, 08h10
Bruno2r
Bonjour,
Pour ma part je procéderais de la façon suivante
Code:

1 2 3 4 UPDATE TABLE CLIENTS SET CLIENTNAME = 'A.N.C.' WHERE replace(replace(CLIENTNAME,'.',''),' ','') = 'ANC' OR CLIENTNAME LIKE ' Agent notionnelle du crédit%'
Cela dit il faut se baser sur un

Code:

SELECT DISTINCT CLIENTNAME FROM CLIENT

pour être certain de ne pas en oublier.

La prochaine fois merci de préciser si c'est dans Oracle et la version ...
surtout si c'est urgent:merci:
06/08/2007, 10h29
riyahi
Citation:
Envoyé par BRUNO2R

Bonjour,
Pour ma part je procéderais de la façon suivante

Code:

1 2 3 4 UPDATE TABLE CLIENTS SET CLIENTNAME = 'A.N.C.' WHERE replace(replace(CLIENTNAME,'.',''),' ','') = 'ANC' OR CLIENTNAME LIKE ' Agent notionnelle du crédit%'

Cela dit il faut se baser sur un

Code:

SELECT DISTINCT CLIENTNAME FROM CLIENT

pour être certain de ne pas en oublier.

La prochaine fois merci de préciser si c'est dans Oracle et la version ...
surtout si c'est urgent:merci:
merci infiniment cher ami
mes la table contient de million d'enregistrement et ca juste un exemple

pour celle on a besoin des algorithme capable de détecte ces anomalie pour les corege
06/08/2007, 11h25
Bruno2r

Résolu ?

Si ton problème est solutionné pense à cliquer sur
:resolu:
ça facilite le suivi des demandes
06/08/2007, 11h50
riyahi

Citation:

Envoyé par BRUNO2R

Si ton problème est solutionné pense à cliquer sur
:resolu:
ça facilite le suivi des demandes

Non cher ami
J'ai dit ma base contiens de million d'enregistrement
j'ai besoin d'un algorithme ou méthode spécifique

Merci bien
06/08/2007, 11h56
plaineR

Il n'existe pas d'algorithme spécifique. Comment fais-tu si tu as :
Association numérologie chinoise (ANC)

Il ne me semble pas possible d'automatiser ce genre de chose...
06/08/2007, 12h08
McM

Exact, tu ne peux faire que des approximations par groupement comme l'a fait Bruno2R.

Tu n'as qu'à faire une boucle et à chaque fois tu update les enregistrements ressemblant (sans les . et les espaces). Ca peut déjà faire un premier regroupement.

PS : Si c'est vraiment urgent, avec des millions d'enregistrements ... t'es mal ;)
06/08/2007, 13h20
riyahi

Citation:

Envoyé par McM

Exact, tu ne peux faire que des approximations par groupement comme l'a fait Bruno2R.

Tu n'as qu'à faire une boucle et à chaque fois tu update les enregistrements ressemblant (sans les . et les espaces). Ca peut déjà faire un premier regroupement.

PS : Si c'est vraiment urgent, avec des millions d'enregistrements ... t'es mal ;)

Non moi je vx détecte ses erreur
âpres je le corrige manialement

Merci bien

Salut,

Tu peux utiliser soundex

Code:

1
2
3
4
5
6
7
8
9
 
SQL> SELECT SOUNDEX ('A.N.C') a, SOUNDEX ('A N C') b, SOUNDEX ('ANC') C
  2  FROM DUAL ;
 
A    B    C
---- ---- ----
A520 A520 A520
 
SQL>

06/08/2007, 13h49
salim11

Salut,

Il t'a déja proposé notre expert Laurent schneider une solution, elle te plait pas??

http://www.developpez.net/forums/sho...d.php?t=372701
06/08/2007, 13h56
riyahi
Citation:
Envoyé par salim11

Salut,

Tu peux utiliser soundex

Code:

1 2 3 4 5 6 7 8 9 SQL> SELECT SOUNDEX ('A.N.C') a, SOUNDEX ('A N C') b, SOUNDEX ('ANC') C 2 FROM DUAL ; A B C ---- ---- ---- A520 A520 A520 SQL>
Je veux traite le cas generale
tu compris pas seulement pour l'exemple

on plus soundex sa marche pas pour detecte ANC et agent nationelle de credit(ANC)

merci infiniment
06/08/2007, 13h59
riyahi

Citation:

Envoyé par salim11

Salut,

Il t'a déja proposé notre expert Laurent schneider une solution, elle te plait pas??

http://www.developpez.net/forums/sho...d.php?t=372701

Oui mon amie
mes par exemple
anc et agens nationel de cret (A.N.C)

n'ayon pas le meme phonitique
06/08/2007, 15h08
McM

Comment veux-tu détecter des erreurs sans faire une boucle par client ?
Si tu as

Citation:

1 Agent notionnelle du crédit
2 EDF
3 ANC
4 GDF
5 A.N.C

Si tu dois corriger manuellement, un petit écran forms qui t'affiche pour chaque nom de client, tous les client ayant le nom approchant.
Pour regrouper ANC et A.N.C, il suffit d'enlever tout ce qui est différent d'une lettre (fct TRANSLATE)
Pour regrouper ANC et Agent notionnelle du Crédit. Là c'est plus chaud.
06/08/2007, 15h26
riyahi

Citation:

Envoyé par McM

Comment veux-tu détecter des erreurs sans faire une boucle par client ?
Si tu as

Si tu dois corriger manuellement, un petit écran forms qui t'affiche pour chaque nom de client, tous les client ayant le nom approchant.
Pour regrouper ANC et A.N.C, il suffit d'enlever tout ce qui est différent d'une lettre (fct TRANSLATE)
Pour regrouper ANC et Agent notionnelle du Crédit. Là c'est plus chaud.

awe se sont des millier d'enregistrement!!!!
manualement imposiblle

mais je vx faire deux methode
la 1er approximative et automatique
et a partir du ses résultat de fais la correction automatique.
06/08/2007, 15h27
salim11
Salut

c'est pas évident :
Code:

1 2 3 4 5 6 7 8 1 Agent notionnelle du crédit 2 EDF 3 ANC 4 GDF 5 A.N.C 6 Agence notionnelle du commerce 7 ANC
Dans ce cas ANC c'est l'acronyme Agent notionnelle du crédit ou Agence notionnelle du commerce ????????????
06/08/2007, 15h51
riyahi
Citation:
Envoyé par salim11

Salut

c'est pas évident :

Code:

1 2 3 4 5 6 7 8 1 Agent notionnelle du crédit 2 EDF 3 ANC 4 GDF 5 A.N.C 6 Agence notionnelle du commerce 7 ANC

Dans ce cas ANC c'est l'acronyme Agent notionnelle du crédit ou Agence notionnelle du commerce ????????????
mes c'est pour cella en a besion d'un phase manuel apres la phase automatique

Voici un exemple de regroupement automatique.

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
WITH client AS (SELECT 1 AS num, 'Agent notionnelle du crédit' AS nom FROM DUAL
UNION ALL SELECT 2,  'EDF' FROM DUAL
UNION ALL SELECT 3, 'ANC' FROM DUAL
UNION ALL SELECT 4, 'GDF' FROM DUAL
UNION ALL SELECT 5, 'A.N.C' FROM DUAL
UNION ALL SELECT 6, 'Agence notionnelle du commerce' FROM DUAL
UNION ALL SELECT 7, ' A N C ' FROM DUAL
)
SELECT 	num, nom, 
		TRANSLATE(nom, 'a' || TRANSLATE(LOWER(nom), 'abcdefghijklmnopqrstuvwxyz', 'a'), 'a') AS transl,
		(	SELECT MIN(c2.num)
			FROM client c2
			WHERE TRANSLATE(c2.nom, 'a' || TRANSLATE(LOWER(c2.nom), 'abcdefghijklmnopqrstuvwxyz', 'a'), 'a')
				= TRANSLATE(c1.nom, 'a' || TRANSLATE(LOWER(c1.nom), 'abcdefghijklmnopqrstuvwxyz', 'a'), 'a')) AS meme_client
FROM CLIENT c1

Code:

1
2
3
4
5
6
7
8
NUM	NOM	TRANSL	MEME_CLIENT
1	Agent notionnelle du crédit	Agentnotionnelleducrdit	1
2	EDF	EDF	2
3	ANC	ANC	3
4	GDF	GDF	4
5	A.N.C	ANC	3
6	Agence notionnelle du commerce	Agencenotionnelleducommerce	6
7	 A N C 	ANC	3

06/08/2007, 16h38
Garuda

Citation:

Envoyé par riyahi

awe se sont des millier d'enregistrement!!!!
manualement imposiblle

mais je vx faire deux methode
la 1er approximative et automatique
et a partir du ses résultat de fais la correction automatique.

OU
Faites_moi vite fait un petit système expert de reconnaissance de formes ou un réseau neuronal de dédoublonnage de fichier client !:koi:
07/08/2007, 22h21
riyahi

Citation:

Envoyé par Garuda

OU
Faites_moi vite fait un petit système expert de reconnaissance de formes ou un réseau neuronal de dédoublonnage de fichier client !:koi:

J'ai bien sisie
Merci de m'explier

Moi je veux une solution pour le cas generale

Merci D'avance
08/08/2007, 00h15
McM

Il n'y a pas de cas général.
C'est à toi de te faire des règles de rapprochement de noms clients.
- Noms identiques lorsque suppression de tout caractère non [A-Z]
- recherche des () et vérification de ce qu'il y a à l'intérieur pour l'exemple anc et agens nationel de cret (A.N.C)
etc .. etc ...

Il n'existe pas de solution miracle.
08/08/2007, 20h38
riyahi

Citation:

Envoyé par McM

Il n'y a pas de cas général.
C'est à toi de te faire des règles de rapprochement de noms clients.
- Noms identiques lorsque suppression de tout caractère non [A-Z]
- recherche des () et vérification de ce qu'il y a à l'intérieur pour l'exemple anc et agens nationel de cret (A.N.C)
etc .. etc ...

Il n'existe pas de solution miracle.

Merci mon Ami
Je pense maintenent a créee une algorithme moi meme
merci bien

Citation:

Envoyé par McM

Voici un exemple de regroupement automatique.

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
WITH client AS (SELECT 1 AS num, 'Agent notionnelle du crédit' AS nom FROM DUAL
UNION ALL SELECT 2,  'EDF' FROM DUAL
UNION ALL SELECT 3, 'ANC' FROM DUAL
UNION ALL SELECT 4, 'GDF' FROM DUAL
UNION ALL SELECT 5, 'A.N.C' FROM DUAL
UNION ALL SELECT 6, 'Agence notionnelle du commerce' FROM DUAL
UNION ALL SELECT 7, ' A N C ' FROM DUAL
)
SELECT 	num, nom, 
		TRANSLATE(nom, 'a' || TRANSLATE(LOWER(nom), 'abcdefghijklmnopqrstuvwxyz', 'a'), 'a') AS transl,
		(	SELECT MIN(c2.num)
			FROM client c2
			WHERE TRANSLATE(c2.nom, 'a' || TRANSLATE(LOWER(c2.nom), 'abcdefghijklmnopqrstuvwxyz', 'a'), 'a')
				= TRANSLATE(c1.nom, 'a' || TRANSLATE(LOWER(c1.nom), 'abcdefghijklmnopqrstuvwxyz', 'a'), 'a')) AS meme_client
FROM CLIENT c1

Code:

1
2
3
4
5
6
7
8
NUM	NOM	TRANSL	MEME_CLIENT
1	Agent notionnelle du crédit	Agentnotionnelleducrdit	1
2	EDF	EDF	2
3	ANC	ANC	3
4	GDF	GDF	4
5	A.N.C	ANC	3
6	Agence notionnelle du commerce	Agencenotionnelleducommerce	6
7	 A N C 	ANC	3

merci infiniment mon ami

Je préfère répondre ici que par PM : Au moins tout le monde peut apporter une méthode particulière.

Pour récupérer la première lettre de chaque mot : La première chose qui me vient à l'esprit c'est le INITCAP

Bon, ensuite faut enlever les minuscules.

Code:

1
2
3
4
5
6
7
8
9
10
11
SELECT LOWER('AGENCE nationale du CREDIT') AS low,
       INITCAP(LOWER('AGENCE nationale du CREDIT')) AS init,
       TRANSLATE( INITCAP(LOWER('AGENCE nationale du CREDIT')),
                    'A' || TRANSLATE(INITCAP(LOWER('AGENCE nationale du CREDIT')),
                                       '0ABCDEFGHIJKLMNOPQRSTUVWXYZ', '0')
                    , 'A') AS Trans
FROM dual
 
LOW	agence nationale du credit	
INIT	Agence Nationale Du Credit
TRANS   ANDC

Fuseau horaire GMT +2. Il est actuellement 11h41.