Discussion :

[Fiona08]

Salut à tous,

Je fais un select sur plusieurs tables pour charger automatiquement une autre table que je ne nommerais table_finale. Il arrive des jours où la table finale n’est pas chargée parce qu’il ya un problème de clé primaire double(survenue d'une autre table qui nous ai livrée).

J’aurai t-il une possibilité avec le sql de ne charger que les données des clés sans « problème » et pour celles qui ont un problème de clé primaire, de les rejeter et charger la table normalement. Les mauvaises données seront en suite sauvegardé dans un fichier.log ou fichier texte par exemple.

Merci de votre aide
Fiona

[papypolo22]

pour moi je te propose d'ajouter à ta table finale une nouvelle colonne de type auto_increment. j'ai eu le mm problème et c'est de cette manière que j'ai introduis plusieurs données de mm clé.

[nuke_y]

Le rejet est à priori incompatible avec la notion de traitement par lot.

- soit tu fais du traitement ligne à ligne et quand une erreur est levée tu rejettes la lignes. C'est ce que font certains ETL (Genio par exemple). Attention aux perfs.

- soit tu fais une table temporaire indexée mais sans contrainte dans laquelle tu travailles pour retirer les lignes en doublon (je crois que l'ETL ODI travaille comme ça)

- soit tu fais un select qui ne prends pas les doublons

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

select clé, count(*) from source group by clé having count(*) = 1

et un autre select qui prends les doublons et les mets dans la table de rejet

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

select clé, count(*) from source group by clé having count(*) > 1

- soit tu peux tenter un trigger sur ta table finale qui contrôle s'il n'y a pas déjà une ligne avec la même clé primaire

[skuatamad]

Le rejet est à priori incompatible avec la notion de traitement par lot.

Pour éviter le ligne à ligne depuis 10GR2 il y a dml error logging

[nuke_y]

Formidable fonctionnalité, j'adore. Bon donc ça dépend de la version de Fiona8

[Fiona08]

Salut à tous,

Merci pour vos réponses. Je traivaille pour le moment avec le version 9.2 d’oracle.

Comment faire un traitement ligne à ligne avec sql ? Je n’utilise aucun ETL. Je dois gerer cela avec du code sql ?

@ skuatamad
Merci pour le lien. Je vais lire et voir si je peux aussi l’exploiter pour la version 9.2 d’oracle.

Merci
Fiona

[Fiona08]

Le rejet est à priori incompatible avec la notion de traitement par lot.


- soit tu fais un select qui ne prends pas les doublons

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

select clé, count(*) from source group by clé having count(*) = 1

et un autre select qui prends les doublons et les mets dans la table de rejet

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

select clé, count(*) from source group by clé having count(*) > 1

Salut nuke_y,

quand je fais

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
insert into table_finale (select count(id_1), id_1, id_ex_2, demp_2, emp_1, date_1, text_1 from table_1, table_2 where id_1 = id_2
group by id_1, id_ex_2, demp_2, emp_1, date_1, text_1having count(id_1) = 1)

cela ne fonctionne pas.

Que dois je faire ou changer?

Merci pour ton aide
Fiona

[Fiona08]

j'obtient la faute:ORA-00913: too many values

[skuatamad]

Tu n'as probablement pas de colonne dans table_finale pour recevoir count(id_1). Retire le du select, il n'est pas obligatoire pour faire le GROUP BY HAVING.

[nuke_y]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
INSERT INTO table_finale
   (SELECT   id_1, id_ex_2, demp_2, emp_1, date_1, text_1
        FROM table_1, table_2
       WHERE id_1 = id_2
    GROUP BY id_1, id_ex_2, demp_2, emp_1, date_1, text_1
      HAVING COUNT (id_1) = 1)

ou

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
INSERT INTO table_finale
   (SELECT id_1, id_ex_2, demp_2, emp_1, date_1, text_1
      FROM (SELECT   COUNT (id_1), id_1, id_ex_2, demp_2, emp_1, date_1,
                     text_1
                FROM table_1, table_2
               WHERE id_1 = id_2
            GROUP BY id_1, id_ex_2, demp_2, emp_1, date_1, text_1
              HAVING COUNT (id_1) = 1))

EDIT:
tsssss et voila. On met en forme le code et on se fait griller