Importer un fichier csv dans une table avec une commande sql ?

Version imprimable

11/02/2015, 16h29
pepito62

Importer un fichier csv dans une table avec une commande sql ?
Bonjour,

Je dois créer une application où celle-ci devra importer dans une table, un fichier csv avec des centaines de milliers de lignes.

Exemple du fichier:

Code:

9974231454123;PANTHALON;52;E14;01/06/2014;1;51

J'aimerais importer ce fichier dans une table.

Existe t-il une commande sql pour importer en 1 fois, un fichier vers une table ?

J'ai essayé la commande sql ci-dessous dans mon programme delphi :
Code:

1 2 3 4 5 load data infile 'c:\test.csv' into table test_import_file fields terminated by ";" ( cb, nom, taille, saison, date, cpt, stk )
Ca ne fonctionne pas, il me dit : ORA-00900: Instruction sql non valide

Toad for Oracle ou Sql developper ont des fonctions à peu près similaire permettant de faire ce genre de chose.

- Qu'existe t-il aujourd'hui pour arriver à importer un fichier dans une table, en commande sql ?!
11/02/2015, 16h59
al1_24

Il faudrait te tourner vers l'utilitaire SQL*Loader
11/02/2015, 17h30
mnitu
Citation:

Envoyé par pepito62

...
Existe t-il une commande sql pour importer en 1 fois, un fichier vers une table ?
...
- Qu'existe t-il aujourd'hui pour arriver à importer un fichier dans une table, en commande sql ?!

Créez une table externe et après c'est juste un simple commande de type
Code:

1 2 3 4 insert into ... select ... from table_externe
12/02/2015, 10h11
pepito62
Citation:

Envoyé par al1_24

Il faudrait te tourner vers l'utilitaire SQL*Loader

En effet le code que j'ai mis dans mon 1er post concerne du code sql loader

Mais je n'ai pas l'utilitaire SQL Loader nommé "sqldr*.exe" sur ma machine

http://jaouad.developpez.com/sqlldr/

Ou le trouver ? L'utilitaire peut être copier dans n'importe quel dossier de Windows ?
Exemple : sqldr.exe situé dans le répertoire de mon application ?

Comment et quand est censé être installé cette utilitaire ?
Citation:
Envoyé par mnitu

Créez une table externe et après c'est juste un simple commande de type

Code:

1 2 3 4 insert into ... select ... from table_externe
Euh oui pourquoi pas mais il manque des étapes là... Comment créer une table externe avec mon fichier ??????

Pouvez-vous en dire un peut plus.

Merci
12/02/2015, 11h48
mnitu

Citation:

Envoyé par pepito62

...
Euh oui pourquoi pas mais il manque des étapes là... Comment créer une table externe avec mon fichier ??????

External Tables: Querying Data From Flat Files in Oracle
13/02/2015, 15h20
pepito62

Code:

CREATE OR REPLACE DIRECTORY ext_tab_data AS '/data';

Apparemment il faut créer un alias et préciser le répertoire où se situe le fichier.

ici "/data" correspond au répertoire data du serveur BDD ?

On ne peut pas préciser un répertoire local du programme client ? (Exemple C:\logiciel\data_file)

Et même si on peut donner un accès au répertoire local du client, ça ne sera pas "C:\logiciel\data_file" mais "\\pcmachin\logiciel\data_file"

C'est assez embêtant, il n'y a pas plus "simple" ?
13/02/2015, 16h57
Waldar
Oracle est une base de données s'appuyant sur un serveur.
In fine, vos données doivent se trouver sur ce serveur.

Pour charger un fichier, vous avez plusieurs méthodes (liste non-exhaustive) :
1. Le copier sur le serveur, puis le monter en base avec SQL*Loader ou une table externe par exemple.
2. Le garder sur votre poste, et demander à votre client d'envoyer les données (SQL*Developer le fait par exemple), mais ce n'est pas forcément très performant avec de la volumétrie.
3. Utiliser un ETL, vous faites le mapping et un peu de configuration et l'ETL se chargera de monter les données (ligne à ligne ou batch en fonction des connecteurs disponibles).
4. Utiliser un programme C++, Java ou autre qui fera ce chargement mais il faudra coder.
Pour un chargement one-shot, la première solution est la plus simple. La première fois vous aller vous casser un peu les dents, mais une fois que vous avez compris tous les éléments en jeu ça roule bien.
Pour un chargement régulier, il faut scripter.
J'ai une préférence pour les chargement via ETL car ils sont plus simple à prendre en main que des gros shells, mais ça reste un outil à apprendre.
13/02/2015, 17h12
pepito62
Citation:
Envoyé par Waldar

Oracle est une base de données s'appuyant sur un serveur.
In fine, vos données doivent se trouver sur ce serveur.

Pour charger un fichier, vous avez plusieurs méthodes (liste non-exhaustive) :

Le copier sur le serveur, puis le monter en base avec SQL*Loader ou une table externe par exemple.
Le garder sur votre poste, et demander à votre client d'envoyer les données (SQL*Developer le fait par exemple), mais ce n'est pas forcément très performant avec de la volumétrie.
Utiliser un ETL, vous faites le mapping et un peu de configuration et l'ETL se chargera de monter les données (ligne à ligne ou batch en fonction des connecteurs disponibles).
Utiliser un programme C++, Java ou autre qui fera ce chargement mais il faudra coder.

Pour un chargement one-shot, la première solution est la plus simple. La première fois vous aller vous casser un peu les dents, mais une fois que vous avez compris tous les éléments en jeu ça roule bien.
Pour un chargement régulier, il faut scripter.
J'ai une préférence pour les chargement via ETL car ils sont plus simple à prendre en main que des gros shells, mais ça reste un outil à apprendre.
Merci pour toutes ces infos, maintenant je suis fixé.
25/03/2015, 15h10
gwenggat

copie csv

Je ne sais pas is je vais répondre à la question mais dans postgres, pour importer un csv il faut d’abord créer toutes les colonnes de ton csv dans l'ordre de ton csv c'est à dire si tu as banane;30gr;oui comme données tu dois créer un table appelons là REF_FRUIT avec les champs typ_fruit poids comestible par exemple dans cet ordre. Tu dois mettre tes données sur ton serveur dans l'exmple local on met le csv à la racine de C. Ensuite par requête SQL

copy REF_FRUIT from 'C:\nom_du_fichier.csv delimiter ';'

Le délimiter de ton csv tu peux le voir en ouvrant ton fichier avec le bloc note par exemple, c'est ce qui va séparer tes données.
Ne pas oublier de mettre l'extension du fichier dans la requête.

De plus, si tu as des problèmes de droit sur ton ordinateur pour autoriser ton logiciel de base de donnée à écrire sur C ou sur ton autre serveur tu dois aller dans les propriétés du lecteur, puis dans sécurité, modifier, ajouter, tu tape les 3 premières lettre tou puis tu fais vérifier les noms, tu devrais trouver tout le monde ou everyone tu choisit ça puis tu lui met un contrôle total dans la fenêtre d'avant. Ceci étant fait tu fais ok partout tu aura un message de vigilance tu fais oui puis il va mettre un peu de temps pur le faire.
Ensuite tu relance ta requête. Normalement ça devrait fonctionner, enfin sur postgres cela fonctionne. J'espère avoir aider mais je pense que ma réponse est tardive.