Discussion :

[sniperpro]

Bonjour ,

Je travaille sur un projet BI, J'en ai des données qui proviens d'une base transactionnelle et d'autres d'un fichier excel que je dois intégrées.

Le problème provient des données du fichier excel (champs nuls, erreurs de saisie, ...) comment je dois procéder pour les intégrées (correction automatique, informer l'utilisateur par mail, ...)

[viggovatelli]

Bonjour,

Tu as plusieurs solutions pour les données provenant des fichiers excel.

Tu peux leur proposer un template qui consiste à leur donner un modèle de structure de fichier avec les champs et leur format, leur type et champ obligatoire ...etc

Ou tu peux effectuer le nettoyage des données au sein de ssis (dans ta staging) soit par un script selon des règles business. Soit tu les rejettes pour correction par l'utilisateur soit tu les corriges selon les règles.

J'espère avoir répondu à ta question.

[meissa57]

Bonjour,
peut-tu détaillé plus stp, puisque je suis dans le même cas et je voudrai savoir les controles qui faut faire avant integration stp
merci

[viggovatelli]

Bonjour,

Pour le template, c'est un modèle qui oblige le user à intégrer les données selon le format des champs que tu auras défini.
Exple: Colonne A (string sur une longueur de 8) colonne B : date format DD/MM/YY etc ...

Pour ce qui est du nettoyage et validation des données, tu peux passer par un script (validation données par expression regex) ou tu peux gérer cela dans l'ETL via des composants propres à ton ETL.

J'espère avoir répondu à tes questions.