Traitement fichier Excel avec insertion en base

[luvtribe]

Bonjour , je suis débutant sur Talend ( 2 semaines ) .
Je dois dévélopper une application ETL , qui récupere des données sur du fichier excel , les formatte , ensuite exécute une requete SELECT pour récupérer l'id max de la table , puis génére un script SQL INSERT de ces données .

les données du fichier excel sont des groupes de 3 lignes , chaque groupe de 3 correspondant a un identifiant .
Donc lorsque je fais le select Max(id_creance) , je dois l'incrémenter a chaque changement de groupe a commencer par le premier :

maxID+1 - ligne 1 - (+values)
maxID+1 - ligne 2 - (+values)
maxID+1 - ligne 3 - (+values)
maxId+2 - ligne 1 - (+values)
maxID+2 - ligne 2 - (+values)
maxID+2 - ...
maxId+3 - ...
etc....

chaque groupe peut etre identifié par un ID_echeance

Mon schéma actuel :

TFileInputExcel -> TMap -> TflowToItereate -> TOracleInput -> tMap2 -> INSERT.sql

Comment faire que l'id récupéré en SELECT s'incrémente toute les 3 lignes ?
Sachant kil exécute la requete en Iterate , il faudrai arriver à lui faire exécute
Id+1 au premier groupe , id+2 au deuxieme groupe et, id +3 au troisieme groupe etc .


J'espere avoir expliqué clairement le problème , ceci est mon premier post ,
Merci d'avance pour votre aide

[Benoit_Durand]

Bonjour,

Pas sûr d'avoir tout compris.
Je pense qu'il faut faut ajouter un compteur (en variable globale) dans le iterate et l'incrémenter à chaque tour. Et faire un truc du genre en java.
Si moncompteur==3 alors Id=Id+1; monCompteur=1;

Un screenshot du job et un nouveau sujet ne seraient pas un luxe.

cordialement,
Benoit Durand

[luvtribe]

Merci , pour ta réponse benoit , je testerai ça demain au boulot .
Cdt

[luvtribe]

re:

Afin de traiter ce problème d'incrémentation d'id par groupe de 3 lignes j'ai écrit
une routine java qui s'éxécute lors du passage de données dans le tMap et qui incrémente des variable en static dans la classe de routine .
=> routines.routinesCompteur.getValueCompteur()

Code :

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
 
public class routinesCompteur {...
 
...
static int cpt=0;
static int compteurGroupe=1;
...
public static int getValueCompteur(){
 
    	cpt++;
    	IF(cpt<=3){
    		RETURN compteurGroupe;
    	}
    	else{
    		cpt=0;
    		compteurGroupe++;
    		RETURN compteurGroupe;
    	}
 
}

Cela fonctionne mais ce n'est certainement pas la meilleure solution

[haskouse]

Tu pourrais optimiser ton code avec un truc de ce genre :

Code :

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
public class routinesCompteur {...   
... 
static int cpt=0; 
static int compteurGroupe=1; 
... 
   public static int getValueCompteur()
   {
           cpt++;
           IF(cpt>3){
                 cpt=0;
                 compteurGroupe++;   
           }      
   
    RETURN compteurGroupe;
    }

}