Discussion :

[Er3van]

Bonjour,

Toujours dans la continuité de ce que je fais depuis qq temps pour ceux qui m'ont déjà aidé ( notamment jml94 ), je stocke des arborescence de fichiers ( de serveurs ) sous forme de tableau.

Pour un gain de temps, pour éviter d'avoir à relancer l'algo qui construit l'arborescence d'un serveur ( qui dure 2 bonnes minutes ), une fois que celle-ci est créée, elle est stockée dans une variable de session. Seulement voilà, l'espace alloué dépasse les limites authorisées, du moins, c'est ce que j'en ai déduit à la lecture de ce message :

Fatal error: Allowed memory size of 16777216 bytes exhausted (tried to allocate 1572930 bytes) in Unknown on line 0

Et mon code associé :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
	if ( !isset($_SESSION["{$_SESSION['nomServeur']}"]) ) { // Si on n'a pas deja charger ce depot
		// Appel à la fonction dessin_arborescence
		$arbo = dessin_arborescence($_SESSION['urlSource']) ;
	}
	else { // Si on a deja charge ce depot, on a juste a le recupperer
		$arbo = $_SESSION["{$_SESSION['nomServeur']}"] ;
		$monTableau = $arbo[0] ;
		$tailleTableau = $arbo[1] ;
		$nomArbo = $_SESSION['urlSource'] ;
 
		// On apppelera la vue d'affichage de l'arborescence
		$_SESSION['vue'] = "Vue_Arbo.php" ;
	}

Je voulais donc savoir, d'une part si j'avais bien interprêté le message, et d'autre part quelle est la taille maximum allouable dans les variables de sessions php.

Enfin, si vous avez des suggestions pour passer outre cette limite, je suis tout ouïe !

[Phelim]

Pour combattre un dépassement mémoire sur une variable session. la technique la plus bourrin est d'augementer le memory_limit (actuellement a 16M chez toi) dans la configuration php.

Pour ton script, pourquoi n'utilises tu pas un fichier de cache ?

N'empeche pour avoir un tableau de 16 mega, tu dois en avoir beaucoup des fichiers dans ton arbo.

Aille, j'ai compris. Ton problème ne vient pas de la taille de ton tableau qui fait : 1 M 5 mais surtout du fait que tu dois avoir plusieur dizaine d'utilisateurs

Des fichiers de cache résoudra tous tes problèmes je pense avec une reference dans la session.

[Er3van]

Aille, j'ai compris. Ton problème ne vient pas de la taille de ton tableau qui fait : 1 M 5 mais surtout du fait que tu dois avoir plusieur dizaine d'utilisateurs

Heu, mon site n'est pas en ligne, intranet uniquement, et il n'y a qu'un seul et unique utilisateur pour le moment : moi ^^

N'empeche pour avoir un tableau de 16 mega, tu dois en avoir beaucoup des fichiers dans ton arbo.

Plus ou moins 5000 fichiers par serveur

Pour ton script, pourquoi n'utilises tu pas un fichier de cache ?

Heu, kézako ? ^^'


En tout cas merci de ton aide, j'vais me renseigner au sujet des fichiers de cache.

[Phelim]

Il s'agit simplement de stocker ton tableau dans un fichier (tu peux le serializer).

Cette action soulage la mémoire vive. C'est valable si tu n'y accedes pas plusieurs fois par script.
Si tu y accedes qu'une fois tous les 10 scripts, cette solution est extremement rentable. Meme une fois, ça evite l'usage des sessions.

Les sessions doivent eviter d'etre utilisé pour des gros caches car PHP les transporte en permanence en memoire (en faite il les charge depuis un fichier au demarrage du script et il les reenregistre à nouveau dans un fichier a la fin)

Dans ton traitement de parcours du serveur, es tu sur de parfaitement liberer la memoire au fur et a mesure, car tu as plus de 14M 5 dans la memoire de php, c'est enorme.

C'est vraiment grave car imagine ce qu'il va se passer quand tu passeras en production avec 5 ou 6 utilisateurs en //

Utilise tu des boucles foreach ?

[Er3van]

Ok, j'viens de lire un exemple et ça m'a l'air assez simple.

En fait, j'ai un script qui créer un tableau en parcourant l'arborescence fichier d'un serveur ( via des commandes exec() ).
Après, j'ai deux pages succeptibles d'y accéder, mais c'est surtout parceque l'opération est longue ( la faute aux 5000 fichiers.... ) qu'il est pratique de sauvegarder le résultat.

Dans la ligne d'erreur que j'ai donnée, c'était après avoir chargé plusieurs arborescence, 2 ou 3, dans le tableau $_SESSION, ce n'est pas le fruit d'une seule arborescence.

Sinon, oui j'utilise un foreach, mais pas à la lecture du tableau, uniquement quand je le rempli ( et pas vraiment le choix ).

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
exec('ls XXXXX', $liste, $retour) ;
if ( $retour == 0 )
    foreach ( $liste as $element )

Vu que je ne connais pas la taille de $liste, foreach est la solution la mieux adaptée à mon avis.

Merci encore

[Phelim]

Tout a fait foreach est la boucle la plus adapté mais c'est une boucle traitre.
Elle travaille sur la copie de ton tableau donc si il est gros, tu charges beaucoup en memoire.

Pour optimiser emploie cette syntaxe :

foreach ($arr as &$value) {
$value = $value * 2;
}

Ainsi, tu travailles sur la reference de ton tableau et evite un nouveau chargement en memoire.
Evite a tout prix, si tu as plusieurs tableaux, de tous les charger en memoire. Fichier cache obligatoire par fichier et tu charges le fichier quand tu as besoin.

Ton script est un PHP cli (en ligne de commande ?)

*Edit* Aille la commande linux. Je suis pas sur que ça soit super optimisé mais surtout ça rend ton script non portable. Pourquoi n'emploie tu pas scandir() ?

Il doit meme exister des class PHP optimisé pour ce genre de traitement