Discussion :

[SDK13]

Bonjour,

Je début dans l'utilisation de Talend.

J'ai réaliser un job pour le traitement de fichier XML que je vous joins.


Lorsque je met en entrée un fichier XML de 80Mb, il faut attendre plus de 8h pour que le fichier soit totalement exécuté.

En faisant quelque recherche, j'ai changé le mode de génération ( je suis passé de "Lent et consommateur de mémoire (Dom4J)" à "Rapide avec peu de consommation de mémoire (SAX)"). Suite à ce changement, l'exécution du Job est très rapide (moins de 30 secondes), cependant je n'ai aucun fichier en sortie.
Le fichier "TOSFED" à la sortie du tMAPXML_4 est vide avec la génération en mode SAX.

J'ai essayé d'utiliser un tMAP plutôt qu'un tMAPXML mais j'arrive pas construire le schéma XML du fichier en sortie ( impossible de créer des balises choice et je dirai même de créer un schéma XML).

N'ayant plus d'autre solution je viens vers dans l’espoir d'avoir des piste me permettant de résoudre mon problème.

[supergeoffrey]

Utilises-tu des requettes XPAth avancés avec SAX.
Certaines requette ne fonctionne pas...

[SDK13]

Utilises-tu des requettes XPAth avancés avec SAX.
Certaines requette ne fonctionne pas...

Oui j'utilise des requettes. Mais ayant peut de connaissance dans ce domaine je ne sais pas comment contourné sur problème pour accélérer le temps d'exécution.
Merci de vous intéresser à mon problème.

[supergeoffrey]

La vraie question utilises-tu des requêtes XPATH avancées !
C'est à dire certaines extensions que tu as dans l'API DomForJ et pas dans Sax.

Je me souviens d'avoir écrit des requêtes XPath non compatible avec Sax. (Des comparaisons par exemple)
Exemple :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

"field[@id=\"1082\"]/asset"

Je voulais savoir si tu as fait de genre de requête ?

Si c'est le cas, il faut que tu récupères les noeuds XML dans ton tXmlInput et que tu utilise un tExtractXMLField pour faire ce genre de requêttes