Discussion :

[amnay]

Bonjour à tous

Je viens poser une question pas trop technique mais plutot méthodologique,
ayant pris l'habitude de travailler sur TALEND avec la possibilité d'alimenter plusieurs cibles à la fois notamment pour ce qui concerne les lignes "défectueuses" : table des lignes incorrect et table des lignes correct.

Je me demande qu'elle est la meilleure façon sur ODI de gérer les lignes avec des erreurs vu qu'on ne peut alimenter qu'une seule cible à la fois

Merci à vous

[kisskool45]

Moi aussi j'ai commencer avec Talend et ca m'a fait bizzare de passer sur ODI,

Pour le contrôle des données on ne peut pas (on ne veut pas d'ailleur) faire du ligne par ligne. ODI a un mécanisme de table de rejet gérer par des KM (CKM).

1) importe un CKM dans ton projet
2) double clique sur ton modèle et choisit dans l'onglet contrôle le CKM que tu vient d'importer
3) pour chaque datastore cible tu défini les contraintes
4) dans l'interface qui alimente ton datastore tu met le flow control à Yes et dans l'onglet Controle tu paramètre les controle que tu veux effectué.
5) execute
6) Regarde dans l'operator le suivit d'execution
7) Une table E$_NOMDETATABLE a été crée en base, cet table contient toutes les lignes rejeté (les lignes ne repondant pas a ta contrainte)

[doc malkovich]

c'est un des avantages d'ODI, la gestion des rejets est transparente et il n'y a rien à faire, il faut juste définir les contraintes.

[amnay]

Bonjour à vous deux ( merci de vos réponses )

je comprends très bien pour la table e$_ que ODI génère automatiquement, j'imagine que c'est cette table qu'il faut utiliser si on veut faire un rapport ( log ) à la fin de l'exécution d'une interface.

Pour le CKM, j'ai déjà CKM Oralce qui est ajouté à mon projet, mais j'arrive pas à ajouter des contraintes.

Pour être plus explicite, le genre de contrainte que je veux utiliser est ( pour le moment ) un teste de la validité d'une date avant de la maper ( dans la table source les dates sont en varchar ( merci les anciens :p ) du coup il y a des mois 13, 14, et des jour 45, 44

Merci pour les éclaircissements.

[kisskool45]

Bonjour,
Alors pour ajouter une contrainte à une table il faut aller dans les modèle, tu ouvre le menu du datastore sur lequel tu veux ajouter une contrainte, tu verra un menu contrainte ^^
Ensuite clique droit ajouter contrainte.
Dans ton cas pour valider le format d'une date, je ferais une fonction sur oracle qui te renvoie 1 si la valeur est une date et 0 si non.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
create or replace
FUNCTION IsDate( p_str IN VARCHAR2, p_format IN VARCHAR2 ) RETURN NUMBER AS
V_date DATE;
BEGIN
    V_Date := TO_DATE( p_str, p_format );
    RETURN 1;
EXCEPTION
   WHEN OTHERS THEN
      RETURN 0;
END;

Et dans ta contrainte :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

IsDate(CHAMP,'YYYYMMDD')=1

Ça ne me choque pas une date dans un varchar.
Pour bien des cas c plus facile à gérer qu'un type date

[amnay]

Bonjour

Merci pour les explications,
j'avais pensé aussi à ajouter une fonction oracle pour la date mais je me demandais si y avait pas un truc propre à ODI.

encore une fois, merci pour l'aide