Discussion :

[Melvine]

Salut,

Est ce que quelqu'un aurait un cours qui explique le principe de fonctionnement des ETL ?Parceque apparament on parle aussi de ELT.

Quelle difference existe t il entre tous ces outils ETL atastage,Informatica,sunopsis,dts ???

Si une personne qui les utilise pouvait repondre,sa serai enrichissant pour tous le monde je pense.

Merci beaucoup.

[SQLpro]

ETL : Extract, Transform and Load.
ELT : Extract, Load and Transform.
La phase transform est donc assuré par le SGBDR dans le cas 2.

Lire le papier de Cyril Gruau sur ce site qui présente l'ETL de MS SQL Server v 2000.

A +

[donny]

moi aussi cela m'interesse.
Est-ce qu'il n'y aurai pas un cours qui explique le processus etl en details ?
les differentes etapes ?

Ou par exemple une personne du forum qui travaille sur un etl,qu'elle nous explique le fonctionnement d'un outil etl comme par exemple informatica, sunopsis.

Merci

[abdelelomari]

Voici une breve description des ETL/ELT :

Que ce soit ETL ou ELT il s’agit d’extraire, transformer et Charger. L’extraction consiste à extraire les données à partir de sources homogènes, la transformation s’occupe de nettoyer, conformer, standardiser, documenter, corriger, dé dupliquer… les données, et le chargement consiste en l’alimentation de l’entrepôt de données.
L’ETL/ELT est la composante la plus critique et la plus complexe d’un entrepôt de données. La mise en place de cette composante peut consommer jusqu’à 70% du temps/effort alloué au projet d’entrepôt de données. Selon Ralph kimball, elle s’agit d’un système complexe qui peut facilement être décomposé en 38 sous systèmes.

À notre avis, la différence entre les deux approches ETL et ELT est plus qu’une simple permutation de l’ordre des lettres, il s’agit plutôt d’un changement important dans les méthodes d’alimentation des entrepôts de données.

Qu’est ce que L’ETL (ETC en français):
Il s’agit de l’approche dite traditionnelle pour alimenter un entrepôt de données. Les outils qui s’inscrivent dans cette logique disposent en général d’un moteur (engine) et sont installés sur des serveurs distincts. Tous les traitements de transformation se font par le biais du moteur ETL. On peut citer par exemple Informatica, cognos decisionStream...C’est l’approche la plus étendue actuellement.

Qu’est ce que l’ELT (ECT en français) :
L’approche d’ELT (Extraction, Loading, Transformation), génère du code SQL natif pour chaque moteur de base de données impliqué dans les processus - sources et cibles. Cette approche profite des fonctionnalités de chaque base de données, et les requêtes de transformation doivent respecter la syntaxe spécifique à l’SGBD. C’est l’approche de Genio (hummingbird) et de sunopsis.

Et si l’on mixait les deux approches ?
Effectivement Business Object avec la suite Data integrator offre les avantages des deux approches.

[donny]

Comment cela fonctionne mais au niveau technique ?

Comment un etl fonctionne sur un exemple concret ?

[Melvine]

merci
Dans ETL, il y a le T de transform,on peut trouver quoi comme transformation ?sur des date comme par exemple recuperer que l'année ?uniformisé des code postaux ?

Dans ta phase ETL tu utilise des table temporaire ?

[rstephane]

Sur Informatica tu as pas mal de fonctions de base comme les conversions, les manipulations de chaînes de caractères, les calculs et agrégations... Pour les calculs plus complexes tu peux aussi utiliser les procédures stockées sous Oracle.
Qu'entends-tu par utiliser des tables temporaires?
Sinon je vais bientôt être formé sous un nouvel ETL (Genio), je pourrais te donner mes impressions

[Melvine]

des tables dans lequelles tu stocke le resultat apres transformation avant de le charger dans ta base ou ton dwh final;

donc tu utilise les procedure stocké pour les transformations plus complexes et qu'entends par la ?si tu avais un exemple cela me permettrait de mieux saisir la chose;

merci

[rstephane]

Moi l'ETL que j'utilise fonctionne en mode ligne à ligne: il lit les infos à partir de la source, fait les transformations nécessaires et enregistre les données à la volée dans une cible, la source et la cible pouvant être un fichier ou une table (Oracle...).
Tu peux créer une table intermédiaire (table ODS) pour stocker les résultats intermédiaires que tu pourras ensuite utiliser comme source pour réinjecter les données dans ta table finale (cible).

Que souhaites tu savoir exactement? Quel type d'exemple aimerais-tu avoir?

[Melvine]

j'aurai aimé avoir des exemple de procedure stocké qui te permette de realiser des transformations .
Pour quelle type de transformation ?

[wolf1109]

bonjour,

je dois commencer à travailler avec desicionStream et je n'ai aucune idée de comment ça marche

est ce que quelqu'un pourrait me donner une documentation qui contient une présentation de ce ETL, comment l'installer? et l'utiliser?

de preference une documentation en Français.

Merci bcp d'avance