Discussion :

[sylvieBI]

Bonjour,

Dans mon projet Talend, je fais une boucle avec TFileList pour lire des fichiers Excels.
Ces fichiers n'ont pas le même nombre de colonnes mais ils ont des colonnes portant le même nom
Je voudrais savoir comment récupérer un schéma avec les données des colonnes de même nom

exemple : j'ai deux fichiers avec 100 et 105 colonnes et la colonne qui m’intéresse se trouve à la 98 ème colonne ou à la 103ème colonne.
Je ne peut donc pas récupérer les données en indiquant la position de la colonne, comment faire?

Merci!

[DevNico]

Bonjour,

Il ne me semble pas qu'il soit possible de faire ça avec les composants standards.

Ce que je ferais :
1°) Dans un premier sous-job : Parser la première ligne contenant les entêtes de colonne pour identifier les colonnes que tu souhaites récupérer. Et stocker l'information (les indices des colonnes à récupérer) dans une ou des variables de contexte.
2°) Dans un deuxième sous-job : parser chaque ligne pour récupérer les champs qui correspondent, à partir des infos récupérées du premier sous-job. C'est à dire récupérer pour chaque ligne les champs correspondants aux indices.

Nicolas

[sylvieBI]

Merci pour ta réponse, J'ai fais cela grâce à la page internet http://bekwam.blogspot.fr/2011/06/dy...en-studio.html
En effet cela permet de répondre à mon problème mais j'aurais voulu faire ça sur un nombre important de fichiers et donc avec un tFileList.
Serait-il possible de le faire en parcourant un répertoire?

Sylvie

[DevNico]

Effectivement, c'est bien expliqué sur cette page. ;-)

Si tu souhaites faire le même traitement sur tous les fichiers de ton répertoire, effectivement il faut utiliser un tFileList.

Tu places ce tFileList avant les sous-jobs, et tu le relies au premier composant (tSetGlobalVar) avec un lien tIterate.
Puis dans les tFileInputDelimited, tu utilises la variable du tFileList qui te fourni le chemin du fichier à lire (((String)globalMap.get("tFileList_1_CURRENT_FILEPATH"))).
Il faut également mettre à jour les composants de sortie pour les variabiliser selon ce que tu souhaites.

Nicolas

[sylvieBI]

Merci je vais essayer!
J'avais déjà essayé mais avec un lien onSubjobOk entre le tFileList et le tSetGlobalVar.

Sylvie

[sylvieBI]

Je n'arrive pas au résultat attendu avec le tFileList, pouvez-vous me dire ce qui ne va pas dans mon job svp?
Je vous envoi des captures :



Je récupère les en-têtes comme avec un seul fichier, mon job s’exécute correctement mais je n'ai pas les bonnes données.
Les données sont censés n'être que des dates et je reçoit ceci :
Les noms des champs sont bien les mêmes dans tous les fichiers.
Comment faire?

Merci!

[DevNico]

Je pense qu'il ne faut utiliser qu'un seul tFileList.
(Avec ce que tu as fait, tu écrases pour chaque fichier les entêtes que tu as trouvées pour le précédent, et j'imagine que tous les fichiers n'ont pas les colonnes au même endroit)

Donc 1 seul tFileList, et tu lies le 2ème sous-job avec un 2ème flux iterate depuis le meme tFileList.

Nicolas

[sylvieBI]

Merci cela fonctionne correctement maintenant!
Merci!

[DevNico]