Discussion :

[enibib]

Bonjour,

Déjà pour commencer je tiens à précisez que ça ne fait que quelques jours que je travail sur Talend OS.
Je doit générer un fichier CSV avec plusieurs lignes (de 2 à n) par "enregistrements" provenant d'une BDD.

Ex de résultat attendu :

// Premier enregistrement
code ligne E;prenom 1;nom 1 ...
code ligne B; adresse 1;tel 1 ...
code ligne R;rib 1 ...
code ligne R;rib 2 ...
// Deuxième enregistrement
code ligne E;prenom 1;nom 1 ...
code ligne B; adresse 1;tel 1 ...
code ligne R;rib 1 ...
ETC

Chaque ligne n'est pas forcement obligatoire et chaque code ligne peux revenir plusieurs fois comme le RIB dans mon exemple.

Mon premier problème c'est qu'avec le composant Tmap en sortie je génère qu'une ligne et pas plusieurs à la fois.
Mon second problème c'est que je ne sais pas comment gérer le fait qu'il peux y avoir plusieurs RIB (c'est un ex), pour le moment je n'en génère qu'un.

Voici ce que je génère facilement pour le moment:

// Premier enregistrement
code ligne E;prenom 1;nom 1;code ligne B; adresse 1;tel 1;code ligne R;rib 1
// Deuxième enregistrement
code ligne E;prenom 1;nom 1;code ligne B; adresse 1;tel 1;code ligne R;rib 1
ETC

Vous est il possible de m’aiguiller un petit peu sur mon problème ?
Merci d'avance

[lennelei]

Bonjour,

commençons par le début

Quelles sont les données à ta disposition au niveau de la base de données ?

[enibib]

J'ai des données venant de plusieurs table (mssql) :
Entreprise
rib
adresse

j'ai relier tout ça par un tMap.
Mais déjà je n'ai rattaché qu'un seul rib par entreprise alors qu'il peux y en avoir plusieurs ou aucun.
Pour les adresse par exemple s'est fixe donc pas de soucis.

[lennelei]

Ca manque toujours de précision, mais as-tu essayé en configurant ton lookup au niveau du tMap pour qu'il prenne "Toutes les correspondances" ?

Voir ici pour un exemple concret.

[enibib]

Merci pour le lien j'ai compris le concept et avance déjà un peu plus.

[pekre]

tu pourras aussi penser d'abord à une jointure entre tes 3 tables.ensuite lier les elements que tu veux en sortir de ta map à ton out(sortir de map) je pense.

[enibib]

Merci, c'est ce que j'ai fait
J'avance petit à petit

[enibib]

Alors voici ou j'en suis.
Pour chaque enregistrement j'arrive à générer plusieurs ligne grâce au paramètres (match model, toutes les correspondances) dans Tmap.
J'ai donc ceci :

// Premier enregistrement
code ligne E;prenom 1;nom 1;code ligne B; adresse 1;tel 1;code ligne R;rib 1
code ligne E;prenom 1;nom 1;code ligne B; adresse 1;tel 1;code ligne R;rib 2
// Deuxième enregistrement
code ligne E;prenom 1;nom 1;code ligne B; adresse 1;tel 1;code ligne R;rib 1

Jusque là merci encore de votre aide
L'étape suivante c'est celle ci :

// Premier enregistrement
code ligne E;prenom 1;nom 1 ...
code ligne B; adresse 1;tel 1 ...
code ligne R;rib 1 ...
code ligne R;rib 2 ...
// Deuxième enregistrement
code ligne E;prenom 1;nom 1 ...
code ligne B; adresse 1;tel 1 ...
code ligne R;rib 1 ...

[pekre]

utilise un tdenormalizer en regroupant sur la ligne et c'est ok je pense

[enibib]

Si j'ai bien compris :
Ton idée est de regroupé un enregistrement par ligne avec tdenormalize ?

[pekre]

ouais

[enibib]

Ok et après pour découper ma ligne en plusieurs ligne ?
J'ai vu un splitrow mais j'avoue ne pas avoir testé encore

[pekre]

essai deja denormalizer et tu verras ce que ça donne

[enibib]

J'ai ça (en gros car j'ai beaucoup plus de champs) :

// Premier enregistrement
code ligne E;prenom 1;nom 1;code ligne B; adresse 1;tel 1;code ligne R;rib 1,rib 2;
// Deuxième enregistrement
code ligne E;prenom 1;nom 1;code ligne B; adresse 1;tel 1;code ligne R;rib 1

[pekre]

je pense qu'on ne s'est pas compris.tu dois relier dans tdenormalize à ta tmap.dans le tdenormalize, tu ajoute comme parametre la ta ligne.relie ensuite ton tdenormalize à un tflowtoiterate et par la suite à une sortie(un importe la sortie,tlogrow,tjava,tfileoutput ....)

[enibib]

La du cou je suis un peu perdu.
Il sert à quoi le tflowtoiterate ?

Si je fait le tdenormalize avant mon tmap comment je peux faire ma jointure ?

[enibib]

Voici un imprim ecran de mon job simplifié.

[lennelei]

Vu ton schéma, je me demande si tu n'es pas partie dans la mauvaise direction ! Ca ressemble pas mal à un tFileOutputMS* ton truc !

Tu fais comment le lien entre tes 3 sources de données ?

[pekre]

salut je t'ai pas dit que le tdnormalize se trouvait avant ta tmap.biensur qu'il doit se placer après.par la suite tu relie ton tdnormalize(n'oublie pas d'ajouter ton parametre lign) à 1 tflowIterate.cela permettra de parcourir toute la sortie de ta tmap.et tu pourras par la suite ajouter une sortie de recuperation des données

tmap=>tdenormalize(avec parametre par exple la ligne)=>tflowIterate=>sortie .ça devra marcher je pense

[enibib]

Alors pour répondre :
Je lie les 3 source de donnée avec une jointure dans mon tmap.
Je vais regarder du coté de tFileOutputMS (que je ne connais pas), merci

Merci Pekre je vais me pencher la dessus aujourd'hui, j'ai encore un peu de mal avec le principe talend et tous ces paramètres je t'avoue, du cou il est possible que je comprenne mal ce qu'on m'explique encore.