Lecture rapide d'un fichier XML

Version imprimable

23/03/2009, 14h21
GriffinK

Lecture rapide d'un fichier XML

Bonjour tout le monde,

Je dispose d'un fichier XML assez énorme (1.5 Mo) et je voudrais savoir quelles sont les pistes à suivre pour le lire le plus rapidement possible ? par exemple, quelle méthode utiliser pour ne lire qu'un type de noeud ?

Plusieurs méthodes dont celle-ci :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
 XmlDocument monXml = new XmlDocument();
            try
            {
                monXml.Load("test01.xml");
                Console.WriteLine("XML Chargé");
            }
 
            catch (Exception ex)
            {
                Console.WriteLine("erreur {0}", ex.Message);
            }
            XmlNode objNode;
            XmlNode root = monXml.DocumentElement;
 
            objNode = root.SelectSingleNode("//node[@value='03']");

Citation:

Envoyé par Akanath

Plusieurs méthodes dont celle-ci :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
 XmlDocument monXml = new XmlDocument();
            try
            {
                monXml.Load("test01.xml");
                Console.WriteLine("XML Chargé");
            }
 
            catch (Exception ex)
            {
                Console.WriteLine("erreur {0}", ex.Message);
            }
            XmlNode objNode;
            XmlNode root = monXml.DocumentElement;
 
            objNode = root.SelectSingleNode("//node[@value='03']");

Merci pour ta réponse rapide ! peux tu m'en dire plus sur cette partie ("//node[@value='03']"); ?

23/03/2009, 14h37
The_badger_man

Il s'agit d'une requête XPath: http://jfdeterme.developpez.com/tuto...rp/tuto_xpath/
23/03/2009, 14h45
GriffinK

Ok, merci à vous deux :)
24/03/2009, 08h58
GriffinK

Re bonjour tout le monde,

J'ai besoin de vos lumières:
Je travaille toujours avec le même fichier xml dont la structure est en gros

Citation:

Département
---->Name
---->Nombre employés
---->Projet
---->Chef d'équipe

Et bcp, bcp de départements, et plusieurs départements par projet.

Au final, je voudrais récupérer quelque chose, un tableau, une liste, je ne sais pas encore qui ressemble à ça;

Citation:

Projet --> Département --> Name
-------------------------> Nombre employés
-------------------------> Chef d'équipe
---------> Département --> Name
-------------------------> Nombre employés
-------------------------> Chef d'équipe
---------> Département --> Name
-------------------------> Nombre employés
-------------------------> Chef d'équipe
Projet --> Département --> Name
-------------------------> Nombre employés
-------------------------> Chef d'équipe
---------> Département --> Name
-------------------------> Nombre employés
-------------------------> Chef d'équipe
---------> Département --> Name
-------------------------> Nombre employés
-------------------------> Chef d'équipe
Projet --> Département --> Name
-------------------------> Nombre employés
-------------------------> Chef d'équipe
---------> Département --> Name
-------------------------> Nombre employés
-------------------------> Chef d'équipe
---------> Département --> Name
-------------------------> Nombre employés
-------------------------> Chef d'équipe

Etc...pour l'instant je compte fonctionner ainsi: à chaque fois que je rencontre un noeud projet, je récupère les noeuds enfant du noeud parent,. Si le projet n'existe pas dans ma liste, faire un Add. Sinon, rajouter au projet le département. Peut-être y a t-il un meilleur algo pour arriver à ce résultat, sachant qu'il y a énormément, énormément de données à traiter (le traitement doit être rapide) ?

Aussi, je ne suis pas certain de la meilleure structure à utiliser pour récupérer ces données, car il peut y avoir plusieurs profondeurs en fonction du département, par exemple:

Citation:

Projet --> Département --> Nombre d'employés --> Noms des employés --> Moyenne d'âge
---------> Département --> Nombre d'employés --> Age des employés

J'espère que ma question est claire :?
24/03/2009, 17h02
Gold Bug

Citation:

Envoyé par GriffinK

Je dispose d'un fichier XML assez énorme (1.5 Mo) et je voudrais savoir quelles sont les pistes à suivre pour le lire le plus rapidement possible ? par exemple, quelle méthode utiliser pour ne lire qu'un type de noeud ?

Si ta contrainte absolue est la vitesse de lecture, tu devrais utiliser un XmlTextReader, qui est beaucoup plus rapide qu'un XmlDocument.
25/03/2009, 09h48
theMonz31

salut

tu peux aussi utiliser :

xsd.exe (outil du framework)

ainsi tu auras :

tonXml.Xml ==> tonXml.xsd ==> TonXML.cs

En 10 secondes, tu auras la classe qui serait remplie par une désérialisation xml de ton code (classe XmlSerializer).

Et après, tu peux travailler sur les données, plus que sur comment les récupérer...

Enfin, perso, je ne me pose plus la question.. Fichier xml == Reflexe automatique XSD, génération de classes automatiques et après, travail sur le fonctionnel :)

Mais bon... c une façon de travailler.. rapide et efficace.. mais pas unique !
25/03/2009, 10h44
Gold Bug

Citation:

Envoyé par theMonz31

salut

tu peux aussi utiliser :

xsd.exe (outil du framework)

ainsi tu auras :

tonXml.Xml ==> tonXml.xsd ==> TonXML.cs

En 10 secondes, tu auras la classe qui serait remplie par une désérialisation xml de ton code (classe XmlSerializer).

Et après, tu peux travailler sur les données, plus que sur comment les récupérer...

Enfin, perso, je ne me pose plus la question.. Fichier xml == Reflexe automatique XSD, génération de classes automatiques et après, travail sur le fonctionnel :)

Mais bon... c une façon de travailler.. rapide et efficace.. mais pas unique !

Mouaipe... j'en suis revenu des classes générées par XSD.exe, parce que la désérialisation XML est extrêmement lente. Il me prenait plus de 500ms pour pour ouvrir et parser un fichier XML de moins de 100 lignes.
26/03/2009, 15h29
GriffinK

Citation:

Envoyé par theMonz31

salut

tu peux aussi utiliser :

xsd.exe (outil du framework)

ainsi tu auras :

tonXml.Xml ==> tonXml.xsd ==> TonXML.cs

En 10 secondes, tu auras la classe qui serait remplie par une désérialisation xml de ton code (classe XmlSerializer).

Et après, tu peux travailler sur les données, plus que sur comment les récupérer...

Enfin, perso, je ne me pose plus la question.. Fichier xml == Reflexe automatique XSD, génération de classes automatiques et après, travail sur le fonctionnel :)

Mais bon... c une façon de travailler.. rapide et efficace.. mais pas unique !

Je vais regarder de ce côté ! merci pour ta réponse, et merci à Gold Bug aussi :)

Toulouse me manque...:cry:
27/03/2009, 01h24
Immobilis

Salut,

Citation:

Envoyé par GriffinK

Je dispose d'un fichier XML assez énorme (1.5 Mo)

C'est tout petit ça. Mes programmes doivent en traiter de 60 ou 80Mo.

Citation:

Envoyé par GriffinK

et je voudrais savoir quelles sont les pistes à suivre pour le lire le plus rapidement possible ? par exemple, quelle méthode utiliser pour ne lire qu'un type de noeud ?

Certainement pas un XmlDocument!! Le XmlDoc charge la totalité du fichier en mémoire avant de le traiter... Pour un petit fichier de 1.5Mo c'est sans douleur, pour les autres bonjour!
Il n'y a rien de plus rapide qu'un XmlReader.

Citation:

Enfin, perso, je ne me pose plus la question.. Fichier xml == Reflexe automatique XSD, génération de classes automatiques et après, travail sur le fonctionnel

Tous les fichiers Xml ne passent pas avec XSD. De plus il n'est pas forcement utile de générer des classes monstrueuses alors qu'on a juste besoin de lire un élément et deux attributs.
A+