Discussion :

[BabouOne]

Bonjour,

Je fais appel à vous car je suis un peu dépassé par une problématique :

J'ai crée une base de donnée relationnelle, celle-ci sera nourri par des rapport (type encore a définir: .txt, XML...).

Mon problème est comment vais je insérer les données des rapports dans ma base de données automatiquement ?

ps : Malgré des recherches sur plusieurs forums et chez Mr google, je n'ai pas trouvé de tuto ou piste de réponse, des liens (français ou anglais) sont les bienvenue !

Merci d'avance

[CinePhil]

Si ces rapport sont relativement volumineux, il vaut mieux les stocker sous forme de fichier sur disque et n'enregsitrer en BDD que le chemin vers le fichier.

[BabouOne]

Bonjour CinePhil,

en effet je me suis intéressé aussi à la problématique de stockage de ces documents. Je pense comme vous me l'avez conseillé, c'est à dire les stocker sur un disque et indiquer le chemin dans la BDD (non pas que les fichiers soit extrêmement volumineux mais plus par rigueur).

Cependant cela ne répond pas à ma problématique : comment insérer de façon automatique des documents (format csv apriori) dans ma base de données ?

Lorsque je dit de façon automatique, je veux signifier qu'il n'y aura pas d'interventions humaine (appuyer sur un bouton "insérer données" par exemple).

Merci d'avance.

[CinePhil]

en effet je me suis intéressé aussi à la problématique de stockage de ces documents. Je pense comme vous me l'avez conseillé, c'est à dire les stocker sur un disque et indiquer le chemin dans la BDD (non pas que les fichiers soit extrêmement volumineux mais plus par rigueur).

Ok, bonne résolution !
Donc pourquoi persister à vouloir insérer des documents en BDD ?

À moins que ceci :

(format csv apriori)

Signifie en fait importer des données issues de fichiers CSV ?

Lorsque je dit de façon automatique, je veux signifier qu'il n'y aura pas d'interventions humaine (appuyer sur un bouton "insérer données" par exemple).

Quant à cet automatisme "bouton", cela relève plus du code de l'appllication utilisatrice que du SGBD.

[BabouOne]

Je voulais parler de l'importation des données issues de fichier comme tu t'en es douté.

Et c'est la que j'ai mon problème, j'ai du mal à visualisé comment je vais pouvoir insérer les données de mes documents dans la BDD alors qu'il n'y aura pas d'action humaine.

Arrivé d'un rapport --> insertion des données dans la bdd

et non pas

Arrivé d'un rapport --> Mr Martin appuie sur le bouton "enregistré" de l'application --> insertion des données dans la bdd.

Je regarde actuellement vers les scripts qui pourront me faire ça de façon automatique mais mes connaissances pour l'instant me font défaut !

[CinePhil]

Il arrive comment le "rapport" ?

C'est géré par une application utilisateur tout ça non ?

Donc je pense que c'est à l'application de générer la requête qui va bien pour enregistrer les données du rapport en BDD.

Sous MySQL existe LOAD DATA INFILE pour insérer des données issues d'un fichier CSV. Je ne sais pas s'il existe un équivalent sous Postgresql.

[BabouOne]

Les rapports arrivent de façon automatique (via des outils, programme en amont).

Donc dans mon analyse actuelle, je pense mettre une couche applicative entre les rapports et la bdd (script ou autre je ne sais pas encore la forme que sa aura).

Sortie d'un rapport --> moulinette d'insertion de données --> BDD

Avec ce systeme il n'y à pas d'intervention humaine.

Je vais regarder si il y a un LOAD DATA INFILE Postgres et m'intéresser à son sujet. Mais comme il y aura plusieurs types de rapport et donc des insertions dans différente tables je sais pas si cela peut être une solution.

En tout cas merci CinePhil pour ces différentes piste de solutions

[ced]

Bonjour,

L'équivalent de la fonction LOAD DATA INFILE, sous PostgreSQL, c'est la fonction COPY.

ced

[BabouOne]

Merci CED, je viens de trouver cette fonction de PostgreSQL avec mon café du lundi matin

Après une rapide étude de la chose, je pense que je vais avoir quelques problème à l'intégré...

Copy Permet de copier des données d'un fichier dans une table de BDD (d'après ce que j'ai vus). Or pour moi un rapport = plusieurs table dans ma BDD (ex : un rapport avec des données sur des personnes et leurs factures (Personne et Facture sont des tables)).

Moi qui pensé avoir trouvé le messie le lundi matin...

Vais reprendre un café pour me porter chance et continuer ma quête !

[CinePhil]

Tu peux importer les données dans une table temporaire et ensuite utiliser des requêtes pour transférer ces données dans les bonnes tables avec els clés étrangères qui vont bien.

Ou autre solution avec un programme qui lit le fichier texte et insère les données dans les bonnes tables mais pas sûr que ce soit plus rapide.