Discussion :

[LamDouni]

Bonjour,
Je travaille sur un projet dans lequel je dois créer une application Java (avec interface et tout) sur Eclipse qui me permettra en premier lieu d'importer des fichiers de type CSV XML ou Excel et de les stocker en base de données , afin de faire des traitements de Data Mining sur ces documents par la suite.
Je ne sais pas par où commencer ni comment faire, j'ai pensé à utiliser comme SGBD MongoDB et DAO pattern MVC pattern et SAX parser ( pour lire les fichiers xml).
Pouvez-vous me donner des idées ? Par quoi dois-je commencer et les étapes. Je suis perdue et je n'arrive pas à avancer.
Si vous avez aussi des tutoriels qui pourront m'aider, n'hésitez pas.
Merci d'avance pour vos réponses.

[Népomucène]

Il faut que tu sépares bien les problèmes

1) Vérifier que tu procèdes bien à l'importation des données :
- csv : fichiers plats avec séparateur (probablement un ";") -> contente-toi de lire le fichier ligne par ligne (regarde la classe Scanner)
- xml : prend une bibliothèque genre Dom4J pour simplifier la lecture
- Excel : prend la bibliothèque Poi

une fois que tu es sûre de récupérer toutes les données alors étape suivante :

2) Pour le choix de la base regarde bien les objectifs à atteindre avec le DataMining
- Est-ce que tu as besoins d'un vrai système OLAP ?
- Est-ce que ce ne serait pas plutôt de simples statistiques ?

A la fin seulement la restitution du résultat :

3) Le MVC n'est pas une obligation si l'interaction avec l'utilisateur est minimaliste :
- si l'utilisateur doit choisir les fichiers à importer : JFileChooser
- si l'utilisateur ne fait qu'appuyer sur des boutons pour visualiser des tableaux / des états

Pour les tableaux : JTable
Pour les états (impression, pdf, renvoi dans Excel, ...) voir JasperReport.

[Carhiboux]

Salut,

Pour bien t'aider à visualiser les choses, tu devrais aussi faire un MCD, cela t'aidera grandement pour créer ta base de données, parce que si tu y vas à l'arrache, tu risque d'avoir des requêtes vraiment pas évidentes à écrire au final, avec des temps de perf dégradés. Et si tu dois faire du data mining je suppose que tu dois traiter un gros volume de données.

Pour moi, la première étape serait même de faire le MCD. Cela permets en général de lever pas mal de lièvres :

* Que fait-on de tel champ?
* Quelles sont les règles de gestion?
* Quelles sont les exceptions?
* etc

Bon courage en tout cas.

[LamDouni]

Salut,

Pour bien t'aider à visualiser les choses, tu devrais aussi faire un MCD, cela t'aidera grandement pour créer ta base de données, parce que si tu y vas à l'arrache, tu risque d'avoir des requêtes vraiment pas évidentes à écrire au final, avec des temps de perf dégradés. Et si tu dois faire du data mining je suppose que tu dois traiter un gros volume de données.

Pour moi, la première étape serait même de faire le MCD. Cela permets en général de lever pas mal de lièvres :

* Que fait-on de tel champ?
* Quelles sont les règles de gestion?
* Quelles sont les exceptions?
* etc

Bon courage en tout cas.

en effet je ne sais pas quoi modéliser parce que le rôle de l'application est que chaque utilisateur :
peut importer un fichier ( l'enregistrer aussi dans la base de données), et traiter les incohérence/traitement Data mining (et pour cette partie je n'ai pas encore d'informations)
donc pour faire un MCD ou modéliser avec uml aussi je vois pas que faire ( y'aura une classe utilisateur et puis c'est tout!!)

[Népomucène]

donc pour faire un MCD ou modéliser avec uml aussi je vois pas que faire

Eh oui, en entreprise c'est très courant de demander un développement sans préciser au développeur ce qu'il doit faire

Sinon, regarde si tu ne peux pas aller voir les quelques utilisateurs les plus représentatifs
pour faire toi-même tes spécifications (à voir avec ton responsable donc ...)

Perso, dans un cas comme cela, je note les demandes de la hiérarchie
et je vérifie (diplomatiquement !) auprès des utilisateurs.

Ne pas oublier aussi qu'un datamining est une application "politique" pour l'entreprise.
On n'est pas dans la simple mise en place d'un programme de gestion des stocks.
Il y a automatiquement, à travers la production de chiffres, des enjeux de pouvoir.

[LamDouni]

Merci pour votre réponse.
En effet, l'utilisateur va pouvoir importer les fichier et faire les traitements DATA MInInG, mais, pour cette partie, je n'ai toujours pas d'informations (si c'est que des stat ou pas) donc je commence par l'importations des fichiers.