Discussion :

[tiplof]

Bonjour,

j'essaie de parser de manière très basique un fichier XML, et j'obtiens des performances catastrophiques (dans les 5 secondes pour traiter un fichier qui met moins de 0,1 secondes pour être parsé de la même manière en excel vba, la honte...).

Les deux approches sonts ci dessous, elles sont toutes les deux aussi lentes. Auriez vous des idées pour accélerer les traitements ?

Variante DOM :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
 
function parserListeValeursXML($urlfichier,$nom_champ) {
	//objets et variables
	$tableauRetour = array();
	$index = 0;
 
	//chargement
	$dom = DOMDocument::load($urlfichier);
	if(!$dom) die('Erreur lecture fichier XML');
	$racine=$dom->getElementsByTagName('Liste_valeurs')->item(0);
	$listeEnregistrements = $dom->getElementsByTagName('enregistrement');
 
	//parcours des objets
	if (count($listeEnregistrements) > 0) {
		foreach ($listeEnregistrements as $enregistrement) {
			$tableauRetour[$index] = $enregistrement->nodeValue;
			$index = $index + 1 ;
		}
		return($tableauRetour);
	} else {
		return(false);
	}
}

Variante SimpleXML :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
 
function parserListeValeursXML($urlfichier,$nom_champ) {
	//objets et variables
	$tableauRetour = array();
	$index = 0;
 
	//lecture et chargement chargement
	$handle = fopen($urlfichier,'r');
	$xmlbrut = '';  
	while (!feof($handle)) {  
		$xmlbrut .= fread($handle, 1024);  
	}  
	fclose($handle);	
	$xml=simplexml_load_string($xmlbrut);
	if(!$xml) die('Erreur lecture fichier XML');
 
	//parcours des objets
	foreach ($xml->enregistrement as $item) {
		$tableauRetour[$index] = $item->$nom_champ;
		$index = $index + 1 ;
	}
	return($tableauRetour);
}

Mille Mercis !

[Invité]

C'est étonnant cette histoire de perf...

• Quelle est la taille de ton fichier ? La profondeur max de l'arbre XML ?
• Quel est ton OS ? Ta version de PHP ?
• De quelle manière accèdes-tu au fichier ? Si c'est via HTTP, as-tu vérifié que ce n'est pas simplement le download qui est très lent ?

[ABCIWEB]

Qu'un traitement php soit plus long cela peut se concevoir mais je serais prêt à parier que la troisième proposition de David Guillot est la bonne... pour que le traitement seul dure cinq secondes il faudrait que le fichier soit énorme et si ce n'est pas le cas cela ne peut être qu'un problème de temps de chargement du fichier.

[tiplof]

Le fichier fait dans les 3ko, profondeur sur 2 niveaux.

Comme tout est en localhost pour l'instant, sur une machine relativement récente, je pars sur l'hypothèse que ce n'est pas un problème de téléchargement.

Remarque : ni le CPU ni la conso de mémoire ne s'affolent pendant le traitement, c'est plutôt l'encéphalogramme plat...

[rawsrc]

Salut,

étrange...
SimpleXml est bâti sur DOMDocument donc c'est kif-kif.
Pour en avoir le coeur net pose des timers autour de $dom = DOMDocument::load($urlfichier); et poste le temps de chargement.

[tiplof]

Voila : 6 secondes pour le DOMDocument::load

Pour info le fichier parsé fait dans les 1,5ko et comprends 21 champs comme ci dessous

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
 <?xml version="1.0" encoding="ISO-8859-1" ?> 
<Liste_valeurs nbEnregistrements="21">
<enregistrement>
  <Societe> tagada</Societe>
</enregistrement>
...

[Invité]

[troll]T'es sous Windows ou quoi ?[/troll]

Plus sérieusement, je te repose la même question : quel OS ? quelle version de PHP ?

Et même pour être plus précis : comment est attaqué PHP (CLI ? Derrière Apache via FPM ? Derrière Apache monté en module ? Derrière Apache monté en CGI ?)

[tiplof]

Aïe, je suis démasqué...

Donc oui, sous XP (et je n'y suis pour rien, désolé ), avec l'installation par défaut de XAMPP 3.1.0.
- PHP 5.4.7
- pour la manière dont est attaqué php, j'ai peur de répondre une annerie...

[Invité]

Sur XAMPP, PHP est monté en module Apache, mais là ne sera pas le problème...

T'aurais pas possibilité de tester dans un autre environnement, genre sur un OS qui sait ce que c'est le XML ? Parce que la librairie MSXML, selon les versions, ça pouvait être un vrai drame...

[Munn Li]

J'ai eu une fois un problème de performances que je ne comprenais pas et quand je changeais le chemin du fichier de "localhost" à "127.0.0.1" le problème de performance disparaissait ...
Le test ne coute pas grand chose à faire en tout les cas.

[tiplof]

Alors je ne suis pas sur d'avoir tout compris, mais il me semble être arrivé à quelque chose (et ce n'est déjà pas mal) en écumant les forums.

Il semblerait que DOMDocument::load attende une fermeture de session TCP pour considérer que la réception du fichier est terminée, ce que le serveur n'envoie pas par défaut, d'où l'attente d'un time out.

Ceci peut être contourné en téléchargeant l'XML avec une requête HTTP demandant la fermeture de session pour le parser après :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
$context = stream_context_create(array('http' => array('header'=>'Connection: close\r\n')));
$chainexml = file_get_contents($urlfichier,false,$context);

Puis de l'ouvrir avec DOMDocument::loadXML

D'où temps de réponse passe de 6 secondes à ~0 sec, ce qui est plus raisonnable pour un pauvre fichier de 1,5ko...

[Invité]

C'était bien la requête HTTP qui posait problème et pas l'interprétation du XML... La bonne pratique serait peut-être d'utiliser cURL pour récupérer le contenu en HTTP et de charger ensuite ce contenu dans le DOM via loadXML()...