Discussion :

[taghroutam]

Bonjour,

Je suis stagiaire en BI et j'ai pour mission de faire un data pipeline, similaire à celui ci-joint, du projet sur lequel je travail.

Le problème c'est que je n'arrive pas à comprendre l'étape de convertion.
Est-ce que c'est similaire au transform de l'ETL ou pas ?

Et en ce qui concerne la normalisation, est ce qu'il suffit d'utiliser la formule suivante: z_i = (x_i - min(x))/(max(x) - min(x))


Merci pour votre aide
Cordialement

[Elros]

Hello,

Même si je n'ai pas toutes les réponses, on va essayer de t'aider !

Les phases "conversion", "normalization", "enrichment" correspondent à la phase de transformation de l'ETL.

Pour la partie "normalization", en regardant ton schéma on a l'impression que l'on souhaite une approche statistique (min-max scaling). On aurait pu avoir une approche qualité de données (DQM) et/ou gouvernance des données (MDM).

Est-ce que tu connais les outils/langages utilisés (existant et cible) pour travailler/restituer les données ? Python, R, autres ?

Elros

[taghroutam]

Hello,

Même si je n'ai pas toutes les réponses, on va essayer de t'aider !

Les phases "conversion", "normalization", "enrichment" correspondent à la phase de transformation de l'ETL.

Pour la partie "normalization", en regardant ton schéma on a l'impression que l'on souhaite une approche statistique (min-max scaling). On aurait pu avoir une approche qualité de données (DQM) et/ou gouvernance des données (MDM).

Est-ce que tu connais les outils/langages utilisés (existant et cible) pour travailler/restituer les données ? Python, R, autres ?

Elros

Bonjour,

Merci de m'avoir répondu.

Je ne suis qu'en première année d'ingénierie et de ce fait je ne connais que le langage R.