optimisation lecture de fichiers

Bonjour,

Voilà, j'ai sur mon serveur un dossier "IMAGES" contenant plusieurs dossiers avec un nommage de date "YYYY-MM-DD".
Ces dossiers sont au nombre de 30 (de J-1 à J-30 sur un intervalle glissant), ceux-ci contenant environ 1500 images chacun avec un nommage "YYYY-MM-DD_HH-MI-SS".

Sur mon site web, je souhaite faire une liste déroulante qui permette de sélectionner une image en particulier par rapport à sa date et son heure : j'ai donc besoin pour cela du nom des fichiers et de leur chemin.
Seulement, dans un soucis d'optimisation et de performance, je ne veux pas devoir reparcourir tous les fichiers de tous les dossiers à chaque rechargement de page (surtout que pour d'autres raisons, mon site se rafraîchit automatiquement toutes les minutes).

Je cherche donc à savoir quelle est la meilleur méthode à utiliser pour ce genre de cas :roll:

- Mettre la liste des images dans une variable de session de type tableau associatif $nom_fichier => $chemin_fichier ?
- Lancer un batch sur mon serveur tous les jours à minuit qui va crée un fichier texte avec nom_fichier - chemin_fichier puis aller lire dedans avec PHP ?

Merci de m'indiquer la meilleur démarche :D

Hello,
je ne sais pas si c'est la meilleure méthode, mais devant un besoin équivalent, j'avais plutôt choisit la deuxième que tu sites, avec quelques différences:

Citation:

---

Lancer un batch sur mon serveur tous les jours à minuit qui va crée un fichier texte avec nom_fichier - chemin_fichier puis aller lire dedans avec PHP ?

---

Tes images, tu les upload comment ? Avec ton code, dans une partie en Back office de ton site ?
Moi, c'était mon cas, du coup, au upload d'une nouvelle image, je générais un fichier texte (qui écrasait l'ancien) avec la liste des photos (mais sous forme d'objet sérialisé php). Ensuite, pour en générer la liste, j'allais chercher l'objet dans le fichier texte...

Maintenant si l'upload de tes images ne passe pas par ton code, il y a toujours le batch mais tu risques d'avoir des images ignorées si elles ont été uploadées après le batch... dans ce cas-là, la sérialisation de l'objet qui a toutes les infos dans une variable session me paraît un moindre mal...

Bonjour, d'abord merci de ta réponse.

En fait non, il n'est pas question d'upload dans mon cas car je développe un intranet et que tous les postes clients ont accès aux images via des dossiers partagés : donc j'ai uniquement besoin de la liste des chemins de tous les fichiers (des sous-répertoires) présents dans mon dossier IMAGES.

Le problème, c'est que parcourir 1500x30 = 4500 fichiers, c'est pas instantanée ! Donc je ne peux pas laisser gérer ça par mon application sous peine de lourdement retardé l'affichage du site :(
Je dis ça car j'ai essayé pour tester en utilisant la méthode suivante de PHP (que j'utilise pour trouver le dernier fichier crée d'un dossier) et pour autant de fichiers, c'est beaucoup trop long (j'atteinds le timeout...).

Code:

---

1 2 3 4

$iterator = new RecursiveIteratorIterator(new RecursiveDirectoryIterator($chemin_de_IMAGES), RecursiveIteratorIterator::CHILD_FIRST); foreach($iterator as $file){ echo $file->getPathname()."<br>"; }

---

Du coup, j'hésites (à moins qu'ils existe d'autres moyens!) entre :
- batch planifié tous les jours à minuit qui me liste les chemins des 4500 fichiers dans un fichier texte, puis récupérer cela (avec le petit traitement qui va bien) dans une variable de session type $_SESSION[images][date_image][heure_image]=chemin_image.
- Installer et utiliser une BDD MySQL

??? :roll:

Tu peux concevoir le bacth comme plus régulier (genre toutes les 2h) si la liste des images évolue trop vite...
Ensuite, la BdD finalement semble la solution la plus simple, car de stocker autant d'infos dans une variable session risque de te poser assez vite des problème de mémoire.... ensuite, au lieu d'avoir ta liste en question (1500 images sur une liste, ça semble difficile à gérer aussi), tu fais une recherche dans la base de donnée en fonction de critère comme le jour et l'heure :)
(du coup ton batch te servirait à mettre à jour le BdD régulièrement)...

Ok, c'est ce que je commençais à me dire...

Merci de ton aide!

Slut,

A mon avis tu pourrais tout faire sans batch ni bdd simplement en optimisant ton système de recherche.

En effet puisque tu mets les fichiers d'une même date dans un même dossier, le choix de la date permet de cibler un dossier particulier de sorte que la recherche se fait dans un dossier de maximum 1500 fichiers environ. Du coup la réponse serveur sera quasi instantanée, c'est juste l'affichage qui prendra du temps. Et à ce niveau tu peux soit faire un système de pagination, soit proposer une deuxième sélection pour affiner la plage horaire.

Au passage, sur le principe et pour ce genre de besoin tu auras un maximum de possibilités en utilisant ajax/php.