Discussion :

[sami117]

Bonjour,


j'ai un job qui doit faire un sélect sur une base oracle et insérer les lignes du résultat dans un Fichier EXCEL (xlsx).

Mon problème :Quand ma requette SQL ramène peu de ligne (genre 15 000) je n'ai aucun problème ..la génération du fichier excel avec les données se fait sans problème ..Par contre quand j'ai par exemple 100 000 lignes à insérer ça plante avec un erreur :

Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
at org.apache.xmlbeans.impl.store.Saver$TextSaver.resize(Saver.java:1592)
at org.apache.xmlbeans.impl.store.Saver$TextSaver.preEmit(Saver.java:1223)

J'ai beau augmenter la taille de la jvm relative au job (ainsi que celle de l'environnement)à 1024 et 2048 j'obtiens toujours la même erreur.

Ma question est ce qu'il y a 'autre moyen (d'autre composant) qui au lieux d enregistrer d abord en mémoire ,inscrivent directement dans le fichier excel de sortie sur le disc..



Merci d'avance

Amicalement

[emenuet]

Bonjour,

D’après ton design, tu dois faire un append dans le 2eme composant ...

Si c'est le cas, il faut savoir que le tFileOuputExcel pour 2007 est très gourmand en mémoire, et que même si tu lui donne toute la mémoire de la machine, ça plante simplement plus tard.

Donc si tu peux éviter d'un append en utilisant un tUnite, cela fonctionnera

[sami117]

Bonjour , merci pour ta réponse..

Il sert à quoi le tUnite ??à que endroit dois je le mettre??

pour toi c est mieux de générer du XLS plutot que de l'XSLX ?


Qu'entend tu par "faire un append" ??? Parle tu des deux tFileOutputExcel?? si c est le cas :le premier créer la le fichier avec une 1 ère feuille
le second tFileExcelOutput se contente d'écrire dans le fichier déja créer par le 1er.


Merci pour ta contribution

[sami117]

D'accord emenuet je vois ce que tu veux dire...effectivement quand je créer le fichier à part sans faire d'append ça marche nickel..
le second excel est bien créer avec 100 000 ligne ..
Par contre comment je dois utiliser le tUnit pour faire un merge sur les deux fichiers excel créer à part?

merci d avance

[sami117]

voici mon nouveau shema ... celà dit le tUnit une sortie pour les deux fichiers excel à merger ??!


Merci

[emenuet]

Bonjour,

Tu relie les 2 tOraclesInput au tUnit avec les liens merge et tu n'as qu'un seul composant tFileOutputExcel. en sortie
Cela fonctionne que si tu écris tes données dans le même onglet du fichier

[sami117]

Merci.

Malheureusement j'ai une requête par onglet avec des données différents.

[weed]

salut Samy,

Je suis curieux, j'ai suivi ta discussion. Comment as tu fais depuis du coup?

Tu as fais écris 2 fichiers Excel xlsx puis tu les as mergé ?