Discussion :

[ccbbrr172]

Bonjour,
J'ai un souci avec Talend, pas tellement avec le logiciel mais pour trouver une solution.
Je m'explique :
j'ai un fichier excell en entrée --> un tMap --> j'extrais des données dans des tables d'une base de données MySQL.

Mon problème est que dans le fichier Excell certaines cellules contiennent plusieurs données dans la même cellules séparées par des "/". Je voudrais donc séparrer les données et les insérer une à une dans la base cependant le nombre de données par cellules n'est jamais identique sinon ça serait plus facile.

par exemple : j'ai une collone Auteur dans mon fichier Excell qui est sous cette forme --> M.Michel/B. Benoit/s.Sebastien
B.Maurice/L.Laurent
S.JEAN etc...
il peu y en avoir plus comme être vide.

J'essais de créer une routine récursive qui retournerait la partie gauche (grâce aux outils disponibles : StringHandling.LEFT...) du "/" et de reprendre en paramètre la partie droite et de recommencer mais je galère un peu... je sais pas si c'est possible.
J'espere être assez claire sinon je reste à disposition pour toutes questions...
Si vous avez des solutions??
Merci

[VinZent]

j'ai un fichier excell en entrée --> un tMap --> j'extrais des données dans des tables d'une base de données MySQL.

Pourquoi tu n'attaques pas directement MySQL ? Tu as les connexions visiblement ...
Attaquer directement une structure relationnelle est largement plus aisée que gérer un dataset tordu intermédiaire sous Excel.

[mhirt]

Bonjour,

Essaye le tNormalize, il fait exactement ce que tu veux.

[Kihmé Xs]

avec un tjavarow tu dois aussi pouvoir faire ce que tu veux si tu connais le java

[ccbbrr172]

Je crois que je vais essayer de mettre la requête SQL qui permet d'ajouter la partie gauche directement dans ma routine. Cette fonction se rappellera (avec en paramètre la partie droite du "/") et prendra a chaque fois la partie gauche du "/"...
Merci à vous pour vos réponses je vais essayer ca...

[ccbbrr172]

J'ai un autre souci à propos de la connexion à la base de données j'ai le message d'erreur suivant :
java.lang.ClassNotFoundException: com.mysql.jdbc.Driver

Je ne comprend pas car j'ai bien les drivers nécessaires à la connexion normalement... dans Talend dans le répertoire lib.

Voici un extrait de ce que j'ai fait... si quelqu'un voit quelque chose??? merci

// template routine Java
package routines;
import java.sql.Connection;
import java.sql.DriverManager;
import java.sql.SQLException;
import java.sql.Statement;



public class extractDonnees
{

public static void SeparreDonnee(int maRef, String maDonnee)
{
int nb;
String pg;
int firstPos;
int longueurDonnee1;
String secondDonnee;

if (maDonnee != null)
{
try
{
Class.forName("com.mysql.jdbc.Driver");
}
catch (ClassNotFoundException cnfe)
{
System.out.println(cnfe);
}

// compte le nombre de "/" séparateur des données
nb = StringHandling.COUNT(maDonnee, "/");

// cas ou il y a plusieurs données
if (nb>=1)
{
// Calcul de la position du "/" et on prend la partie gauche
firstPos = StringHandling.INDEX(maDonnee, "/");
pg = StringHandling.LEFT(maDonnee, firstPos);

try
{

String url = "jdbc:mysql://194.57.178.224:3306/oai";
Connection con = DriverManager.getConnection(url, "oaicat", "oaicat");

Statement st = con.createStatement();

// Requete sql pour l'ajout de la partie gauche dans la base de données
String ReqAjout = "INSERT INTO METADATA (recID, varName, value, scheme, subfield) values ("+maRef+", '650', "+pg+", '0', 'a');";

st.executeUpdate(ReqAjout);

st.close();
con.close();
}
catch (SQLException se)
{
System.out.println(se);
}


// Calcul de la longueur totale de la chaine pour avoir la partie droite
longueurDonnee1 = StringHandling.LEN(pg);

// Récupération de la partie droite (longueur chaine - longueur de la partie gauche)
secondDonnee = StringHandling.RIGHT(maDonnee, longueurDonnee1 - firstPos);

// Compte le nombre de "/" dans la partie droite (cas ou il y plusieurs données dans la partie droite
if (StringHandling.COUNT(secondDonnee, "/")>=1)
{
// Appel de la procédure avec en paramètre la partie droite à traiter
extractDonnees.SeparreDonnee(maRef, secondDonnee);
}
else
{
...

[ccbbrr172]

PS : j'ai oublié j'appelle cette routine dans un tJavarow

[co2]

Bonjour,

Essaye le tNormalize, il fait exactement ce que tu veux.

Je crois que je vais essayer de mettre la requête SQL qui permet d'ajouter la partie gauche directement dans ma routine. Cette fonction se rappellera (avec en paramètre la partie droite du "/") et prendra a chaque fois la partie gauche du "/"...
Merci à vous pour vos réponses je vais essayer ca...

Bonjour,

Je pense que ta routine fait beaucoup trop de chose et ne sera difficilement maintenable (surtout par des personnes ne connaissant pas java). Je te conseille de tester la solution de mhirt : utiliser les composants de normalisation/denormalisation intégrés en standard dans la solution afin d'avoir une representation graphique de ton job.

Cédric

PS: esssaye de mettre [TALEND] dans le titre de ton thread afin d'avoir que l'on repere des la lecture du titre quel ETL tu utilises. Merci

[ccbbrr172]

Je vois pas trop ce que sa fait les tNormalize/denormalize... quelqu'un pourrait m'expliquer???
car je vois pas comment je peut extraire les données d'une seule cellule Excel pour les mettre dans plusieurs cellules alors que je ne sais pas a chaque fois le nombre exact de données.
Dans ma routine java je voulais aller insérer les données directement en base de données mais ca marche pas...