Requête Oracle avec tMap

[mattheox]

bonjour,
je débute sur Talend et je ne sais pas si je peux faire ce que j'aimerai faire.
J'ai un fichier de log que j'analyse via tFileInputRegex que je retravaille ensuite via un tMap dont j'ai en sortie (entre autres) une colonne "MACOLONNE_MAP".
J'ai une base de données Oracle avec une table qui a une colonne "MACOLONNE_ORACLE" qui est la PK de cette table
J'aimerai pour chaque valeur "MACOLONNE_MAP" faire une jointure avec la base de données en faisant une requête SQL : select * from MATABLE where MATABLE.MACOLONNE_ORACLE='VALEUR DE MACOLONNE_MAP'.
Est-ce que c'est possible?
ou bien faut-il faire autrement? "select * from MATABLE" => et faire la jointure dans le tMap?

Merci d'avance

[haskouse]

Si tu veux créer une requête genre :

Code :

SELECT * FROM MATABLE WHERE MATABLE.MACOLONNE_ORACLE='VALEUR DE MACOLONNE_MAP'

Oui c'est possible il te suffira juste de lier ta sortie du tMap avec un composant tFlowToIterate, ensuite tu mettra un tOracleRow par exemple et dans ce dérnier tu remplacera la partie "Where" par un appel à la variable contenant la valeur de ta colonne (après un tFlowToIterate une variable est créé automatiquement pour chaque colonne du flow, utilise le Ctrl + espace pour les voir lors de la saisie de ta requête dans le tOracleRow).

Ou sinon, et ce ce sue je pense moi le plus facile, c'est de lier ta sortie directement avec un autre tMap et lier ton autre table à ce même tMap, puis tu feras la jointure à l'intérieur.

A toi de voir.

[mattheox]

merci de ta réponse.
je vais tester avec le FlowIterate.
pour ce qui est de la 2ème solution (que tu préconises) ce qui me gène c'est de ramener tous les enregistrements de la table (plus 100 millions de lignes) pour en extraire une seule à chaque fois car la jointure que je demande est sur la PK de la table.
donc, je pense que c'est plus performant de faire une clause where sur la PK que de tout ramener, non?

[mattheox]

j'ai testé avec le tFlowToIterate, et ça fonctionne bien pour la jointure (ça évite de parcourir les 100 millions de lignes).
par contre, en sortie de ce tFlowToIterate, je ne peux récupérer que les colonnes de ma table Oracle; je perds les colonnes de mon tMap précédent.
comment faire?

[haskouse]

Tu pourrais ajouter les colonnes que tu veux récupérer dans le schéma de ta sortie Oracle puis dans les paramètres avancés de ta table Oracle il y' a une partie où tu peux choisir quelles sont les colonnes que tu veux réellement insérer dans la base et lesquels tu ne veux pas.

Dans les paramètres de ton composant de sortie Oracle, tu coches "Paramètres avancés", une liste des champs de ton schéma va apparaître, dans cette dernière tu décoches les deux colonnes "Peut être mis à jour" et "Insérable" pour les colonnes que tu ne veux pas insérer ni mettre à jour dans la base de données.

[mattheox]

merci de ta réponse, mais je ne veux pas faire d'insertion en base.
voici ce que j'ai
tMap --> tFlowToIterate --> tOracleRow --> tFileOutputDelimited

dans tFileOutputDelimited, j'aimerai avoir des colonnes de "tMap" et de "tOracleRow".

de plus, j'aimerai que la jointure entre tMap et tOracleRow soit externe car j'ai des lignes de sortie de tMap où la colonne de jointure avec tOracleRow n'a pas de valeur et j'ai besoin d'avoir cette ligne en sortie du tFileOutputDelimited

[smalleret]

Bonjour,

Il y a peut être une autre solution à ce problème.

Dans le tMap, un flux lookup peut être chargé une fois pour toute, ou bien être rechargé à chaque ligne du flux principal (mode de jointure "reload at each row" ou "reload at each row (cache)")

Dans ce cas il est possible d'exposer une variable au sein du tMap, qui pourra être appelée dans la clause WHERE de la requête SQL du composant utilisé dans le lookup.

Attention, le flux lookup est rechargé à chaque ligne, donc pour éviter de rejouer la connexion à la base de données à chaque fois, il est préférable d'utiliser un composant de connexion en début de job et d'utiliser cette connexion dans le composant utilisé dans le flux lookup.