Discussion :

[snoopo]

Bonjour,
j'ai un petit problème. Je cale depuis hier sur les importations de données sur une base oracle via des fichiers csv.
J'ai 2 fichiers csv qui au format

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

data1;data2;data3

Le premier fichier rempli certains champs de ma table temporaire tandis que l'autre fichier rempli les autres colonnes de ma table temporaire.

Voici le contrôle qui remplit ma table temporaire avec un fichier csv

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
 
options (skip=1)
load data 
infile '../csv/facture.csv'   
Truncate
into table TMP_FACTURE
fields terminated by ';'   optionally enclosed by '"'
TRAILING NULLCOLS
(
ID NULLIF (ID = "NULL") ,
STATUT NULLIF (STATUT = "NULL") ,
CONTRAT_ID NULLIF (CONTRAT_ID = "NULL") ,
DATE_ECHEANCE "to_char(to_date(:DATE_ECHEANCE,'DD/MM/YYYY'),'DD/MM/YYYY') " ,
NUMERO NULLIF (NUMERO = "NULL") ,
DATE_ETABLIE "to_char(to_date(:DATE_ETABLIE,'DD/MM/YYYY'),'DD/MM/YYYY') " ,
DATE_FIN "to_char(to_date(:DATE_FIN,'DD/MM/YYYY'),'DD/MM/YYYY') " ,
ETAT "to_char('A_TRAITER')"
)

Sachant que j'exécute mon fichier via un load.sh dans lequel j'établie ma connection au shéma et je charge les données via la commande

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sqlldr userid=${schemaT}/${mdpass}  control=$CTL/facture.ctl log=$LOG/facture.log bad=$BAD/facture.bad discard=$DISCARD/facture.dsc direct=y errors=0

Je suis pas assez d'expérience pour savoir comment le faire. Ma question est comment modifier ce fichier pour qu'il puisse lire 2 fichiers csv et insérer à la colonne voulue ?

Merci à vous

[ducho]

Bonjour,

a ma connaissance, sqlloader ne sait pas faire d'update sur une table.
donc impossible de l'utiliser pour remplir une table avec deux fichiers
différents qui mettent à jour les mêmes lignes.

il est préférable de fusionner les deux fichiers dans un seul auparavant .

l'option TRUNCATE vide la table avant le chargement .


Cordialement

[snoopo]

salut,
je me suis un peu documenter ces derniers temps et j'ai trouvé que l'utilisation des tables externes pouvaient être une solution.
Mais je posais la questions vu qu'il s'agit de fichier plat et que je dois migrer une grosse volumétrie de données. Est ce que je ne serais pas limité par la taille max. du répertoire ou sera crée la table externe ?

Sinon j'ai une autre solution, c'est de créer plusieurs table temp et avec sqlplus faire un update sur ma table final.

Qu'en pensez vous ?

[doc malkovich]

hello
la solution des fichiers externes est bien si tu alimentes ta table en 2 passes ( 1 insert et 1 update ), quoique l'update peut être couteux, surtout si la volumétrie est importante.
Le mieux serait de jointurer les 2 fichiers, mais le faire directement avec des tables externes est délicat car il n'y a pas de stats calculées sur les tables externes ( enfin, à ma connaissance ).
Il faudrait donc alimenter 2 tables temporaires puis faire la jointure pour alimenter ta table finale en truncate/insert.

[a.presles]

les tables externe sont une solution pratique mais dans ton cas il faudrait mieux merger les fichiers avant pour le faire en une seul passe. plutot que insert puis update.