Discussion :

[pepito62]

Bonjour,

Je dois créer une application où celle-ci devra importer dans une table, un fichier csv avec des centaines de milliers de lignes.

Exemple du fichier:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

9974231454123;PANTHALON;52;E14;01/06/2014;1;51

J'aimerais importer ce fichier dans une table.

Existe t-il une commande sql pour importer en 1 fois, un fichier vers une table ?

J'ai essayé la commande sql ci-dessous dans mon programme delphi :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
load data
infile 'c:\test.csv'
into table test_import_file
fields terminated by ";"
( cb, nom, taille, saison, date, cpt, stk )

Ca ne fonctionne pas, il me dit : ORA-00900: Instruction sql non valide


Toad for Oracle ou Sql developper ont des fonctions à peu près similaire permettant de faire ce genre de chose.

- Qu'existe t-il aujourd'hui pour arriver à importer un fichier dans une table, en commande sql ?!

[al1_24]

Il faudrait te tourner vers l'utilitaire SQL*Loader

[mnitu]

...
Existe t-il une commande sql pour importer en 1 fois, un fichier vers une table ?
...
- Qu'existe t-il aujourd'hui pour arriver à importer un fichier dans une table, en commande sql ?!

Créez une table externe et après c'est juste un simple commande de type

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
 
insert into ...
select ...
  from table_externe

[pepito62]

Il faudrait te tourner vers l'utilitaire SQL*Loader

En effet le code que j'ai mis dans mon 1er post concerne du code sql loader

Mais je n'ai pas l'utilitaire SQL Loader nommé "sqldr*.exe" sur ma machine

http://jaouad.developpez.com/sqlldr/

Ou le trouver ? L'utilitaire peut être copier dans n'importe quel dossier de Windows ?
Exemple : sqldr.exe situé dans le répertoire de mon application ?

Comment et quand est censé être installé cette utilitaire ?

Créez une table externe et après c'est juste un simple commande de type

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
 
insert into ...
select ...
  from table_externe

Euh oui pourquoi pas mais il manque des étapes là... Comment créer une table externe avec mon fichier ??????

Pouvez-vous en dire un peut plus.

Merci

[mnitu]

...
Euh oui pourquoi pas mais il manque des étapes là... Comment créer une table externe avec mon fichier ??????

External Tables: Querying Data From Flat Files in Oracle

[pepito62]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

CREATE OR REPLACE DIRECTORY ext_tab_data AS '/data';

Apparemment il faut créer un alias et préciser le répertoire où se situe le fichier.

ici "/data" correspond au répertoire data du serveur BDD ?

On ne peut pas préciser un répertoire local du programme client ? (Exemple C:\logiciel\data_file)

Et même si on peut donner un accès au répertoire local du client, ça ne sera pas "C:\logiciel\data_file" mais "\\pcmachin\logiciel\data_file"


C'est assez embêtant, il n'y a pas plus "simple" ?

[Waldar]

Oracle est une base de données s'appuyant sur un serveur.
In fine, vos données doivent se trouver sur ce serveur.

Pour charger un fichier, vous avez plusieurs méthodes (liste non-exhaustive) :

1. Le copier sur le serveur, puis le monter en base avec SQL*Loader ou une table externe par exemple.
2. Le garder sur votre poste, et demander à votre client d'envoyer les données (SQL*Developer le fait par exemple), mais ce n'est pas forcément très performant avec de la volumétrie.
3. Utiliser un ETL, vous faites le mapping et un peu de configuration et l'ETL se chargera de monter les données (ligne à ligne ou batch en fonction des connecteurs disponibles).
4. Utiliser un programme C++, Java ou autre qui fera ce chargement mais il faudra coder.

Pour un chargement one-shot, la première solution est la plus simple. La première fois vous aller vous casser un peu les dents, mais une fois que vous avez compris tous les éléments en jeu ça roule bien.
Pour un chargement régulier, il faut scripter.
J'ai une préférence pour les chargement via ETL car ils sont plus simple à prendre en main que des gros shells, mais ça reste un outil à apprendre.

[pepito62]

Oracle est une base de données s'appuyant sur un serveur.
In fine, vos données doivent se trouver sur ce serveur.

Pour charger un fichier, vous avez plusieurs méthodes (liste non-exhaustive) :

1. Le copier sur le serveur, puis le monter en base avec SQL*Loader ou une table externe par exemple.
2. Le garder sur votre poste, et demander à votre client d'envoyer les données (SQL*Developer le fait par exemple), mais ce n'est pas forcément très performant avec de la volumétrie.
3. Utiliser un ETL, vous faites le mapping et un peu de configuration et l'ETL se chargera de monter les données (ligne à ligne ou batch en fonction des connecteurs disponibles).
4. Utiliser un programme C++, Java ou autre qui fera ce chargement mais il faudra coder.

Pour un chargement one-shot, la première solution est la plus simple. La première fois vous aller vous casser un peu les dents, mais une fois que vous avez compris tous les éléments en jeu ça roule bien.
Pour un chargement régulier, il faut scripter.
J'ai une préférence pour les chargement via ETL car ils sont plus simple à prendre en main que des gros shells, mais ça reste un outil à apprendre.

Merci pour toutes ces infos, maintenant je suis fixé.

[gwenggat]

Je ne sais pas is je vais répondre à la question mais dans postgres, pour importer un csv il faut d’abord créer toutes les colonnes de ton csv dans l'ordre de ton csv c'est à dire si tu as banane;30gr;oui comme données tu dois créer un table appelons là REF_FRUIT avec les champs typ_fruit poids comestible par exemple dans cet ordre. Tu dois mettre tes données sur ton serveur dans l'exmple local on met le csv à la racine de C. Ensuite par requête SQL

copy REF_FRUIT from 'C:\nom_du_fichier.csv delimiter ';'

Le délimiter de ton csv tu peux le voir en ouvrant ton fichier avec le bloc note par exemple, c'est ce qui va séparer tes données.
Ne pas oublier de mettre l'extension du fichier dans la requête.

De plus, si tu as des problèmes de droit sur ton ordinateur pour autoriser ton logiciel de base de donnée à écrire sur C ou sur ton autre serveur tu dois aller dans les propriétés du lecteur, puis dans sécurité, modifier, ajouter, tu tape les 3 premières lettre tou puis tu fais vérifier les noms, tu devrais trouver tout le monde ou everyone tu choisit ça puis tu lui met un contrôle total dans la fenêtre d'avant. Ceci étant fait tu fais ok partout tu aura un message de vigilance tu fais oui puis il va mettre un peu de temps pur le faire.
Ensuite tu relance ta requête. Normalement ça devrait fonctionner, enfin sur postgres cela fonctionne. J'espère avoir aider mais je pense que ma réponse est tardive.