Discussion :

[virgul]

Bonjour,

Voila j'aimerais savoir si ca existe un programme qui arrive à segmenter en plusieurs xml un gros XML de 1gb ou plus.

Biensur si possible, il faudrait qu'il ferme lui-même les balises afin que les multiple XML reste well-Formed. Mais sinon ca fait rien.

Merci

Thierry

[alain.couthures]

Je ne connais rien de tout fait pour cela mais cela dépend tellement de la structure du XML que cela ne m'étonne pas : si c'est un rateau régulier, c'est plus facile à faire que si toutes sortes d'éléments s'y retrouvent.... Quelle racine prendre ?...

Pour un 1Go, il faut partir sur une lecture type SAX. STX (http://stx.sourceforge.net/) devrait être très bien pour sélectionner les noeuds.

[laurentibus]

oui, moi je suis également amener a faire plusieurs XML avec un gros XML ...
en effet il vaut mieux un "rateau regulier" comme dirai alain sinon ça serait un casse tête a utiliser ....

alors avec jdom je parse et make a la volé :
je parcours mon gros xml en boucle : a chaque fois que j ai ma future balise root je recupere ses balises enfant et je creer en meme temps un doc xml.....

ex : dans mon fichier annuaire, a chaque fois que j ai la balise personne je creer un nouveau xml que je remplis en parcourant les balises nom,prenom, numero ....

ps: attention le gros fichier ne fait que qq 10zaines de Ko donc je sais pas si celaz sera le mieux pour les tiens ... peut etre voir sax cf alain ...

[Erwy]

ps: attention le gros fichier ne fait que qq 10zaines de Ko donc je sais pas si celaz sera le mieux pour les tiens ... peut etre voir sax cf alain ...

Je peux deja repondre non
les methodes DOM traitent facilement les fichiers de tailles moyennes,quelques mega, mais commencent à ramer plus quand on dépassent les dizaines...
A eviter absolument quand on passe au Giga

[virgul]

Je ne connais rien de tout fait pour cela mais cela dépend tellement de la structure du XML que cela ne m'étonne pas : si c'est un rateau régulier, c'est plus facile à faire que si toutes sortes d'éléments s'y retrouvent.... Quelle racine prendre ?...

Pour un 1Go, il faut partir sur une lecture type SAX. STX (http://stx.sourceforge.net/) devrait être très bien pour sélectionner les noeuds.

Merci pour votre réponse et à tous les autres.

Oui c'est un râteau régulier:

Code XML :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
 
<?xml version="1" Encoding="UTF-8"?>
<ino:request xmlns:ino="http://namespaces.softwareag.com/tamino/response2">
<ino:object>...</ino:object>
<ino:object>...</ino:object>
</ino:request>

Le but est juste de faire plusieurs fichiers contenant chacun 100 éléments ino:object. Et bien sûr de refermer et de réouvrir un nouveau avec ino:request comme balise root.

Bon merci pour la piste je vais aller continuer de regarder ca parait assez similaire a la syntaxe du XPath.

++

Thierry