Discussion :

[lylau]

Bonjour,
J'ai 2 tables (j'avoue que la modélisation de cette bd dont j'ai "héritée" laisse à désirer ):

1. Table1 qui contient (pour simplifier) des couples (code, valeur, région) du genre (code1, X, region1), (code1, null, region2), (code2, X, region2),...

1. Table2 contient les valeurs normalement possibles pour chaque code de T1 du genre (code1, X), (code1, Y), (code1, Z), (code2, A),...

Je souhaite créer un job qui me permette de vérifier que pour chaque ligne de T1 la valeur d'un code est conforme (ou pas) à celle prévue dans T2 , en ajoutant une colonne "Controle" dans T1 qui prend les valeurs OK ou KO.
Quelqu'un aurait-il une idée des composants à utiliser?
Merci d'avance.

[jsd03]

Ce que je ferais (pour une bdd oracle par exemple) :

tOracleInput avec pour requête :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
select table1.code, table1.region, table1.valeur, table2.code AS newCol
from table1
left outer join table2
on table1.code = table2.code

puis un tMap ou un tJavaRow qui remplace pour valeur de sortie newCol pour OK ou KO avec un condition du type :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

(!Relational.ISNULL(row1.neCol) && !row1.neCol.equals("")) ? "ok" : "ko"

Et une sortie pour finir

nb : Mes champs sont de type String c'est pour ça que j'utilise .equals("")

[lylau]

Merci Jsd03 pour ta réponse.
J'ai effectivement pensé à une solution de ce type c'est dailleurs celle sur laquelle je suis en train de travailler:
1. Une jointure entre Table1 et Table2 sur le champ code
2. Un code java dans un Tmap pour calculer la valeur de newCol à partir de T1.code et de T2.code.

Sauf qu'avec la jointure, pour chaque ligne de table 1, j'associe toutes les lignes de Table 2 => un exemple de lignes après jointure en me basant sur les exemples du 1er post:
T1.code,T1.Valeur, T1.Région, T2.code, T2.valeur (libellés des colonnes)
code1, X, region1, code1, X, 'OK'
code1, X, region1, code1, Y, 'KO'
code1, X, region1, code1, Z, 'KO'

Le problème, c'est que je n'ai pas besoin des 2 dernières lignes (qui sont dailleurs incorrectes)...

[jsd03]

Tu ne les veux pas en sortie de ta requête ? ou en sortie de ton tMap ?

[lylau]

Je ne les veux pas en sortie de mon tmap.

[jsd03]

tu peux ajouter une condition sur ta sortie (bouton avec une flèche verte) et indiquer

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

row1.valeur.equals("OK")

row1 étant le nom de ton entrée.

Par contre je ne comprend pas bien l'utilité de ne gardé que les "OK" en sortie de tMap alors que tu pourrais le faire directement dans ta requête pour récupérer uniquement les données qui matchent avec la table2 comme ceci :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
SELECT table1.code, table1.region, table1.valeur, table2.code AS newCol
FROM table1
JOIN table2
ON table1.code = table2.code

Ou alors tu veux aussi que sa matchent avec la valeur du code et le code ?? Alors ce serait plutôt cela :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
select table1.code, table1.region, table1.valeur, table2.code
from table1
join table2
on table1.code = table2.code
and table1.valeur = table2.valeur;

[lylau]

Encore merci pour tes réponses.
En fait ce que je souhaite c'est obtenir toutes les lignes de la table1 avec le flag de controle à OK ou à KO. J'en ai besoin pour faire des stats sur la qualité des données par région. Je ne peux donc faire de filtre à la sortie de mon tmap.
Je viens de faire la rencontre du composant tDenormalize et je suis en train de faire des tests...
N'hésite pas à me donner des idées !

[lylau]

Bonjour,

Comment insère-t-on des variables de contexte dans une requête portée par un composant tDBInput?

[lylau]

Désolée pour le précédent post, il n'a rien à faire là...

[jsd03]

Merci Jsd03 pour ta réponse.
J'ai effectivement pensé à une solution de ce type c'est dailleurs celle sur laquelle je suis en train de travailler:
1. Une jointure entre Table1 et Table2 sur le champ code
2. Un code java dans un Tmap pour calculer la valeur de newCol à partir de T1.code et de T2.code.

Sauf qu'avec la jointure, pour chaque ligne de table 1, j'associe toutes les lignes de Table 2 => un exemple de lignes après jointure en me basant sur les exemples du 1er post:
T1.code,T1.Valeur, T1.Région, T2.code, T2.valeur (libellés des colonnes)
code1, X, region1, code1, X, 'OK'
code1, X, region1, code1, Y, 'KO'
code1, X, region1, code1, Z, 'KO'

Le problème, c'est que je n'ai pas besoin des 2 dernières lignes (qui sont dailleurs incorrectes)...

j'ai une question, pourquoi dans ton post si dessus tu marques que les deux dernières lignes sont incorrectes ?

[lylau]

j'ai une question, pourquoi dans ton post si dessus tu marques que les deux dernières lignes sont incorrectes ?

Sauf qu'avec la jointure, pour chaque ligne de table 1, j'associe toutes les lignes de Table 2 => un exemple de lignes après jointure en me basant sur les exemples du 1er post:
T1.code,T1.Valeur, T1.Région, T2.code, T2.valeur (libellés des colonnes)
code1, X, region1, code1, X, 'OK'
code1, X, region1, code1, Y, 'KO'
code1, X, region1, code1, Z, 'KO'

Ces deux dernières lignes sont incorrectes parque la fonction que j'ai dans mon tmap ne vérifie la valeur que ligne par ligne, ainsi pour la ligne 1, la valeur X est comparée à la valeur X (issue de T2) et la fonction retourne OK . Sur la ligne 2, elle retourne KO parce qu'elle la compare à Y. Sauf que X,Y, Z sont les composantes de la liste de valeurs autorisées pour code1. Donc le résultat devrait être OK pour la ligne 1.

Pour contourner ce problème, à la sortie de mon tmap, j'ai utilisé un tdenormalize sur la colonne des listes de valeurs et sur la colonne de controle. Ensuite un autre tmap qui transforme la colonne de ctrl en 'ok' si elle contient un couple 'ko, ok'. Je conserve la colonne des liste de valeur pour information.
Je me suis grattée la tête toute la journée d'hier et ça marche plutôt pas mal . Merci pour ton aide.