Discussion :

[vdumont]

Bonjour, j'essaie de faire un petit programme multi-plateforme qui indexe les fichiers d'un disque dur et qui ensuite permet de rechercher des fichiers selon divers critères.

Il y a donc 2 phases, l'indexation et la recherche.

Pour la partie indexation je vois 2 approches possibles:
Parcourir récursivement l'ensemble du disque dur et:
1 - Ajouter dans un Btree toute l'information (meta-data) sur les fichiers et stocker le Btree dans un (ou des) fichier(s). Cela implique parcontre de trouver une librairie Java pour les BTree, quelqu'un en connait une ?
2 - Ajouter l'information (meta-data) sur les fichiers dans une base de de donées SQLite et faire les recherches là dessus par la suite.

J'ai regarder un peu du côté de Lucene aussi.

Le logiciel au départ fait donc un indexage complet, mais par la suite il faudrait idéalement procéder par indexage incrémental (mettre a jour dans l'index seulement les changements qu'il y a eu aux fichiers).

Mon problème est comment faire des mises-a-jour incrémentales sur cet index (peu importe l'approche considérée). En effet, comment faire pour savoir quels fichiers ont été renommés/effacés/ajoutés dans le système de fichiers?

Une façon (peut-être un peu brutale) que je vois serait de faire rouler (en limitant le % CPU qu'il peut utiliser) un "crawler" à des périodes X re-scannerait complètement les fichiers du système et compare avec les meta-data dans la base de données et fait les modifications (insert/delete) en conséquence.

Merci pour vos idées.

[elitost]

Lucene est je pense un bon choix open-source pour l'indexation.

Soit tu as l'option d'un crawler, soit tu déclenches les modifications d'indexation lors des actions sur tes fichiers.

[vdumont]

Bonjour, merci pour la réponse.

Ce qui m'intriguie c'est comment réaliser la détection des changements systèmes qui ont été fait aux fichiers pendant que mon programme roule (ou ne roule pas). ?

[elitost]

Bonjour, merci pour la réponse.

Ce qui m'intriguie c'est comment réaliser la détection des changements systèmes qui ont été fait aux fichiers pendant que mon programme roule (ou ne roule pas). ?

demande à google comment ils font...

Une petite recherche s'impose effectivement, j'imagine que les approches sont nombreuses, par exemple tu pourrais avoir une application en tâche de fond qui scanne les nouveaux fichiers d'un répertoire, dont la date est > à une précédente que tu aurais enregistrée, et tu indexes ou réindexes...

C'est juste une idée comme ça, je pense que tu trouveras une réponse précise en cherchant.

Bon courage

[tcheffa]

Oui c'est vraiment très gênant, j'ai rencontré le même souci. De plus, il y a un autre problème, c'est que Lucene ne permet d'indexer que 31 fichiers!!!!
As tu trouvé une solution pour ce problème ?

Bonne chance pour nous les deux concernant ce souci

[Népomucène]

Si je ne dis pas de bêtise, il me semble que Java 7 a une nouvelle bibliothèque (nio avec WatchService ?) qui permet la détection des modifications de fichiers.

[elitost]

Si je ne dis pas de bêtise, il me semble que Java 7 a une nouvelle bibliothèque (nio avec WatchService ?) qui permet la détection des modifications de fichiers.

Oui, c'est ça http://java.sun.com/developer/techni.../javase/nio/#6