Quel ETL est à me conseiller pour une migration de bases ? [Résolu]

Arvulis · 02/08/2006, 09h33

Bonjour

,

J'aimerai utiliser un ETL simple pour migrer des bases PostgreSQL et ACCES dans une base optimisé PostgreSQL. Les anciennes bases comportent une architecture avec des champs rajoutés et modifiés au fil du temps. J'aimerai donc créer une toute nouvelle base et injecter les anciennes données là où il faut sans implémenter un parser qui pourrai être fastidieu à mettre en place.

Que me conseilleriez vous comme ETL graphique ?

al1_24 · 02/08/2006, 10h35

Tu peux déjà tout simplement utiliser ACCESS, surtout si tu as l'habitude de le manipuler, sans avoir besoin de mettre en place un nouveau logiciel.
Surtout si ton transfert doit être effectué en une seule fois.
La mise en place d'un ETL ne se nécessite que si les opérations de migrations de données doivent être effectuées de manière régulière.

Arvulis · 02/08/2006, 14h41

merci pour ta réponse l'ami

!

Je me servirai de celà pour faire la migration... enfin je vais voir celà.

Par contre, apparement, j'ai proposé la solution des Entrepôts de données et là faudra le calculer avec un ETL assez souvent.

J'ai vu que les licences dans le domaine étaient assez onéreuse. Mais j'ai aussi lu quelquepart que des ETL openSource existaient, or je n'en ai pas trouvé sur le web.

Quelqu'un pourrai t'il m'aiguiller ?

gerald2545 · 02/08/2006, 14h42

euh......c'est quoi un ETL?

Arvulis · 02/08/2006, 14h51

Citation:

Envoyé par gerald2545

euh......c'est quoi un ETL?

« Extract-Transform-Load » est connu sous le terme ETL (ou parfois : datapumping). Il s'agit d'une technologie informatique intergiciel (comprendre middleware) permettant d'effectuer des synchronisations massives d'information d'une banque de données vers une autre. Selon le contexte, on traduira par « alimentation », « extraction », « transformation », « constitution » ou « conversion », souvent combinés.

Elle est basée sur des connecteurs servant à exporter ou importer les données dans les applications (Ex : connecteur Oracle ou SAP...), des transformateurs qui manipulent les données (agrégations, filtres, conversions...), et des mises en correspondance (mappages). Le but est l'intégration de l'entreprise par ses données.

source Wikipédia

...

donc y en a t'il un ptit openSource ?

al1_24 · 02/08/2006, 14h58

Citation:

Envoyé par Arvulis

donc y en a t'il un ptit openSource ?

Après une petite recherche sur

j'ai trouvé deux projets : octopus et clover

Arvulis · 02/08/2006, 15h05

Citation:

Envoyé par al1_24

Après une petite recherche sur

j'ai trouvé deux projets : octopus et clover

ah c'est cool ça

je les avait pas trouvé ceux ci !

merci encore à toi !

Xo · 02/08/2006, 16h20

Il existe un site en français qui traite des ETL : http://www.systemeetl.com/

Mais je n'y ai rien trouvé sur un produit Open Source ...

Arvulis · 02/08/2006, 16h51

Citation:

Envoyé par Xo

Il existe un site en français qui traite des ETL : http://www.systemeetl.com/

Mais je n'y ai rien trouvé sur un produit Open Source ...

je te remercie bien !

j'ai essayé l'openSource Enhydra... pas moyen de me connecter

j'ai essayé le trial de Visual Integrator et c'est vraiment compliqué

je vais voir sur le site si y a autre chose.

co2 · 03/09/2006, 18h08

Bonjour,

Talend Open Designer est l'ETL totalement Open Source avec interface visuelle (contrairement à Clover ou Octopus). Il appartient à la famille des code-generators (génération de code Perl pour le moment).
Talend Open Designer est actuellement en beta chez de nombreux de nos clients et sera librement téléchargeable à partir du 18 septembre.

Pour plus d'information, n'hésitez pas à consulter notre site web à http://www.talend.com.

Cordialement,
Cédric Carbone
Directeur Technique
Skype : cedriccarbone
Mail : ccarbone(a)talend.com

---
Talend est un éditeur logiciel Pure Player focalisé sur le développement du meilleur outil de DataManagement OpenSource. Les solutions Talend se positionnent en rupture sur le marché, et ce, à de nombreux niveaux : business model (logiciel open source / support formation expertise assurés), architecture technique (modèle « Grille de calcul »), technologies employées (Eclipse RCP, GMF, Webservices...)

oliver414 · 27/10/2006, 15h39

Je m'insère dans cette discussion pour vous apporter quelques nouvelles et précisions sur le produit évoqué par Co2 :

http://www.talend.com/downloads-talend.htm permet de télécharger la version V1.0.0 du logiciel, des sources et de sa documentation !

Je vous invite à visiter 3 autres pages pour prendre connaissance des avantages que Talend met en avant pour justifier sa stratégie open source :

Pour prendre part au projet ou pour poser vos questions directement à l'équipe en charge du developpement de ce logiciel open source dédiée à l'ETL : http://www.talend.com/downloads-talend.htm !!

Si la langue anglaise vous rebute, rabattez vous sur http://fr.wikipedia.org/wiki/ETL pour plus d'information sur les outils etl open source !
________________________________________________________________
L'open source révolutionne t'il l'ETL, le data warehousing et plus géneralement la BI ? Mon opinion est faite, et la votre ?

02/08/2006, 09h33	#1
Arvulis Membre du Club Inscription : septembre 2003 Messages : 115 Détails du profil Informations personnelles : Âge : 30 Localisation : France Informations forums : Inscription : septembre 2003 Messages : 115 Points : 45 Points : 45	Quel ETL est à me conseiller pour une migration de bases ? Bonjour , J'aimerai utiliser un ETL simple pour migrer des bases PostgreSQL et ACCES dans une base optimisé PostgreSQL. Les anciennes bases comportent une architecture avec des champs rajoutés et modifiés au fil du temps. J'aimerai donc créer une toute nouvelle base et injecter les anciennes données là où il faut sans implémenter un parser qui pourrai être fastidieu à mettre en place. Que me conseilleriez vous comme ETL graphique ?
	00

02/08/2006, 10h35	#2
al1_24 Modérateur Alain Ingénieur d'études décisionnel Inscription : mai 2002 Messages : 4 450 Détails du profil Informations personnelles : Nom : Alain Âge : 51 Localisation : France, Val de Marne (Île de France) Informations professionnelles : Activité : Ingénieur d'études décisionnel Secteur : Conseil Informations forums : Inscription : mai 2002 Messages : 4 450 Points : 7 556 Points : 7 556	Tu peux déjà tout simplement utiliser ACCESS, surtout si tu as l'habitude de le manipuler, sans avoir besoin de mettre en place un nouveau logiciel. Surtout si ton transfert doit être effectué en une seule fois. La mise en place d'un ETL ne se nécessite que si les opérations de migrations de données doivent être effectuées de manière régulière. __________________ Modérateur Langage SQL Règles du forum Langage SQL à lire par tous, N'hésitez pas à consulter les cours SQL N'oubliez pas le bouton et pensez aux balises [code] Si une réponse vous a aidé à résoudre votre problème, n'oubliez pas de voter pour elle en cliquant sur
	00

02/08/2006, 16h20	#8
Xo Expert Confirmé Inscription : janvier 2005 Messages : 2 701 Détails du profil Informations personnelles : Âge : 38 Informations forums : Inscription : janvier 2005 Messages : 2 701 Points : 3 237 Points : 3 237	Il existe un site en français qui traite des ETL : http://www.systemeetl.com/ Mais je n'y ai rien trouvé sur un produit Open Source ... __________________ "Ce que l'on conçoit bien s'énonce clairement, Et les mots pour le dire arrivent aisément." Nicolas Boileau "Expliquer empêche de comprendre si cela dispense de chercher" Quiz Oracle : venez tester vos connaissances ! La FAQ Oracle : 138 réponses à vos questions Aidez-nous à la compléter
	00

03/09/2006, 18h08	#10
co2 Membre émérite Inscription : mai 2002 Messages : 182 Détails du profil Informations forums : Inscription : mai 2002 Messages : 182 Points : 823 Points : 823	ETL Open Source : Talend Open Designer Bonjour, Talend Open Designer est l'ETL totalement Open Source avec interface visuelle (contrairement à Clover ou Octopus). Il appartient à la famille des code-generators (génération de code Perl pour le moment). Talend Open Designer est actuellement en beta chez de nombreux de nos clients et sera librement téléchargeable à partir du 18 septembre. Pour plus d'information, n'hésitez pas à consulter notre site web à http://www.talend.com. Cordialement, Cédric Carbone Directeur Technique Skype : cedriccarbone Mail : ccarbone(a)talend.com --- Talend est un éditeur logiciel Pure Player focalisé sur le développement du meilleur outil de DataManagement OpenSource. Les solutions Talend se positionnent en rupture sur le marché, et ce, à de nombreux niveaux : business model (logiciel open source / support formation expertise assurés), architecture technique (modèle « Grille de calcul »), technologies employées (Eclipse RCP, GMF, Webservices...)
	00

27/10/2006, 15h39	#11
oliver414 Invité régulier Inscription : octobre 2006 Messages : 6 Détails du profil Informations forums : Inscription : octobre 2006 Messages : 6 Points : 7 Points : 7	Quelques news sur Talend Open Studio Je m'insère dans cette discussion pour vous apporter quelques nouvelles et précisions sur le produit évoqué par Co2 : http://www.talend.com/downloads-talend.htm permet de télécharger la version V1.0.0 du logiciel, des sources et de sa documentation ! Je vous invite à visiter 3 autres pages pour prendre connaissance des avantages que Talend met en avant pour justifier sa stratégie open source : http://www.talend.com/home-data-open...pen-source.htm http://www.talend.com/solutions-data/open-source.htm http://www.talend.com/solutions-data...ivity-perl.htm Pour prendre part au projet ou pour poser vos questions directement à l'équipe en charge du developpement de ce logiciel open source dédiée à l'ETL : http://www.talend.com/downloads-talend.htm !! Si la langue anglaise vous rebute, rabattez vous sur http://fr.wikipedia.org/wiki/ETL pour plus d'information sur les outils etl open source ! ________________________________________________________________ L'open source révolutionne t'il l'ETL, le data warehousing et plus géneralement la BI ? Mon opinion est faite, et la votre ?
	00

02/08/2006, 14h41	#3
Arvulis Membre du Club Inscription : septembre 2003 Messages : 115 Détails du profil Informations personnelles : Âge : 30 Localisation : France Informations forums : Inscription : septembre 2003 Messages : 115 Points : 45 Points : 45	merci pour ta réponse l'ami ! Je me servirai de celà pour faire la migration... enfin je vais voir celà. Par contre, apparement, j'ai proposé la solution des Entrepôts de données et là faudra le calculer avec un ETL assez souvent. J'ai vu que les licences dans le domaine étaient assez onéreuse. Mais j'ai aussi lu quelquepart que des ETL openSource existaient, or je n'en ai pas trouvé sur le web. Quelqu'un pourrai t'il m'aiguiller ?
	00

02/08/2006, 14h42	#4
gerald2545 Membre chevronné Inscription : février 2003 Messages : 643 Détails du profil Informations forums : Inscription : février 2003 Messages : 643 Points : 660 Points : 660	euh......c'est quoi un ETL?
	00

Outils de la discussion
Afficher une version imprimable Envoyer un lien vers cette page par email