sqlloader, chargement (un peu) complexe

Version imprimable

18/09/2006, 16h37
fguigui

sqlloader, chargement (un peu) complexe

Bonjour,

J'ai cherché dans le forum oracle et je n'ai pas trouvé de solutions, mais je pense qu'il doit y en avoir une.

Je charge classiquement des données dans une table par sqlloader, l'un des champs doit être renseigné par une certaine valeur (toujours la même) qui peut se trouver dans une variable globale oracle.

Dans le ctl j'essaie de faire quelque chose comme :

LOAD DATA
REPLACE INTO TABLE TOTO
FIELDS TERMINATED BY ';'
TRAILING NULLCOLS
(
typenr,
fill1,
fill2,
fill3,
fill4,
fill5,
PERIODE "&1"
)

où &1 serait la variable globale, (ou si on pouvait passer ce paramètre à sqlloader directement ce serait aussi bien !).

Bon ça ne fonctionne pas ainsi, que faire pour que ça marche ?

Ca se passe avec oracle 10g

Cordialement.
19/09/2006, 09h03
fguigui

pas de solutions ?
19/09/2006, 13h30
fguigui

et supposons que la valeur à renseigner se trouve dans le 1er enregistrement, peut-on la récupérer et la mettre dans les autres enr. ?
19/09/2006, 14h15
jejam

Si j'etais toi, je ferais une mise a jour du champs 'PERIODE' de ma table 'TOTO', apres l'avoir charger :D
ca peut etre une solution :roll:
19/09/2006, 14h33
fguigui

Citation:

Envoyé par jejam

Si j'etais toi, je ferais une mise a jour du champs 'PERIODE' de ma table 'TOTO', apres l'avoir charger :D
ca peut etre une solution :roll:

Je ferais bien ça, mais je perds le bénéfice du append/replace, la 'PERIODE' faisant partie de la clé de la table, le update planterait s'il y avait déjà des enr. ayant cette clé.

Cordialement

Regarde cet exemple

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
Can one modify data as it loads into the database?
Data can be modified as it loads into the Oracle Database. Note that this only applies for the conventional load path and not for direct path loads. 
   LOAD DATA
   INFILE *
   INTO TABLE modified_data
   (  rec_no                      "my_db_sequence.nextval",
      region                      CONSTANT '31',
      time_loaded                 "to_char(SYSDATE, 'HH24:MI')",
      data1        POSITION(1:5)  ":data1/100",
      data2        POSITION(6:15) "upper(:data2)",
      data3        POSITION(16:22)"to_date(:data3, 'YYMMDD')"
   )
   BEGINDATA
   11111AAAAAAAAAA991201
   22222BBBBBBBBBB990112
 
   LOAD DATA
   INFILE 'mail_orders.txt'
   BADFILE 'bad_orders.txt'
   APPEND
   INTO TABLE mailing_list
   FIELDS TERMINATED BY ","
   (  addr,
      city,
      state,
      zipcode,
      mailing_addr   "decode(:mailing_addr, null, :addr, :mailing_addr)",
      mailing_city   "decode(:mailing_city, null, :city, :mailing_city)",
      mailing_state
   )

Source : http://www.orafaq.com/faqloadr.htm

Et tente de faire appel à une fonction qui retourne ta période

19/09/2006, 18h21
fguigui

oops, ça a l'air sympa !
Dans BeginData, je mettrais la fonction qui retourne la période ?

Ou plutot, dans les valeurs affectés aux champs je pourrais faire appel à une fonction qui retourne la période ?

Je vais essayer, mais j'ai plusieurs fers sur le feu, je vous tiens au courant.

Cordialement.
20/09/2006, 19h12
fguigui

Je ne pense pas que la solution préconisée fonctionne. Il faudrait pouvoir passer un paramètre fonctionnel à sqlloader : ce n'est pas possible (sqlloader ne prend que ses paramètres standards).

Donc je ne pense pas qu'il y ait une solution au problème, ou effectivement passer par l'appel d'une fonction et faire qq chose comme :
{
.
.
.
PERIODE "pack_toto.fct"
.
.
.
}

pack_toto.fct ferait un accès bd, ce qui est lourd (pour 1 million d'enr. 1 million d'accès bd...).

Donc voila, si pas possible de passer un paramètre fonctionnel à sqlloader, son utilisation n'est pas intéressante (dans ce cas).

Cordialement
21/09/2006, 12h06
sygale

Comme détermines tu la période ?

Peut elle être calculée ?
exemple période = Trimestre = to_char(sysdate,'Q')

non elle ne peut-être calculée.
En fait j'ai réussi à résoudre ce problème.

En fait la période se trouve dans l'enr. d'entête (1er enr. du fichier), je la récupère dans une variable globale (et je la met également dans cet enr.) et je la met dans les enr. suivants.

Ca donne dans le ctl :
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 LOAD DATA APPEND INTO TABLE TOTO FIELDS TERMINATED BY X'02' TRAILING NULLCOLS ( typenr, fill1, fill2, fill3, fill4, fill5, fill6, periode "DECODE(:typenr, '01', PAC.GETPERIODE(:fill5), PAC.GETPERIODE)" )
Il y a surcharge de la fonction GETPERIODE, celle avec le paramètre set et get la variable globale, celle sans paramètre retourne la variable globale.

Ca marche ! Mais c'est dommage qu'on ne puisse passer des paramètres fonctionnels à sqlloader.

Cordialement.

21/09/2006, 16h51
sygale

content pour toi

peux tu mettre le tag :resolu: ? Merci d'avance