Discussion :

[weed]

Hello tout le monde,

J'ai réussi à simuler un minus avec Tmap grace au post :
http://www.developpez.net/forums/d70.../minus-talend/
et http://mindmajix.com/talend/checking...ist-and-lookup
avec un catch lookup inner join reject.

cela me permet ainsi de récupérer les id présent dans ma source A (fichier CSV) et absente dans ma source B (dans une table). J'aimerai récupérer le delta dans l'autre sens, absente dans la source A et présente dans la source B.

Exemple
Source A - identifiant : 12, 15, 16, 18
source B - Identifiant : 15, 16, 20


Mon but en sortie du job :
Dans un même fichier Excel
un onglet : identifiant présent source A (et absent source B) : 12, 18
un autre onglet : identifiant présent source B (et absent source A) : 20


Pour faire la différence dans les 2 sens, j'ai besoin de 2 tMap. La source A est la source principal (lien main) sur un tMap, la source B est la source principal sur le 2ème tMap. En positionnant "catch lookup inner join reject" à true, j'obiens toutes les lignes qui n'ont pas de correspondance et donc les écarts.


Les 2 sources en entrée (fichier csv et BD) des 2 tMap sont identiques. Je cherche comment éviter de les dupliquer (et même toute la chaine) pour des questions d'optimisation.

Comment pourrais je procéder pour utiliser mes sources A et B 2 fois (chacune) par un tmap?

[weed]

Je me répond à moi même, j'ai trouvé un élément qui répondrai à mon besoin treplicate comme décrit ici :
https://www.safaribooksonline.com/li...9/ch07s08.html

Je vais tester et je vous tiens au courant

[weed]

Comme promis je vous tiens au courant.

Il semblerait qu'il y ait une limitation de Talend avec les boucles ou je ne sais quoi.
J'ai l'impression q'il n'est pas possible de mettre 2 Treplicate et de relier les sorties des tReplicate aux 2 tMap. Talend m'empèche de relier le dernier lien avec le 2ème Tmap


Je me suis alors contenté de cette solution. Je duplique ma source provenant d'un fichier csv. Par contre, la source base de donnée est réplqué.
Cela fonctionne nickel. Le delta de mes identifiants dans les 2 sens sont bien enregistrés dans mon fichier Excel.



Maintenant je souhaiterai une liste de fichier dans un fichier
Mais ce modèle n'a pas trop de sens. Je souhaite récupérer le delta des identifiants dans les 2 sens de chaque fichier traités.



J'ai alors testé de repliqué mais je ne peux pas répliqué la liste des fichiers pour ensuite traité chaque fichier 2 fois.

[supergeoffrey]

Pour faire simple tu n'as besoin que d'unseul tFileList

[weed]

Okay, en effet il n'y a pas besoin de relier les 2 sources de fichier comme ici :


On récupére bien le nom du fichier avec la formule : ((String)globalMap.get("tFileList_2_CURRENT_FILEPATH")). J'ai fait le test en ajoutant cette variable dans mon 2ème tMap


J'ai l'impression que toute les variables affecté par les éléments sont accessibles par l'ensemble des éléments du même sous job.
mais surtout tFile liste passe à l'itération suivante une fois que tous les traitements du sous job ont été traité. Ainsi de cette manière, les 2 tMap traite bien du même fichier

Cela me semble logique après coup.
Merci pour ton aide, cela va pas mal m'aider.

[supergeoffrey]

En tout cas pour info un flux iterate qui pointe vers un lookup d'un flux c'est mal pour info