Discussion :

[Hydre]

J'ai crée un package permettant d'alimenter ma dimension. Seulement lorsque j'exécute mon package plusieurs fois ma dimension est rempli avec autant de doublons. Avec quoi gérer ca ?

[FrancoisJehl]

Alors deux approches:
1) Vider la dimension à chaque fois (SQL Command avec un DELETE avant ton Data Flow) mais ça t'empêche d'historiser
2) N'alimenter que ce qui est neuf

Pour filtrer ce qui est nouveau tu as plusieurs solutions:
- Utiliser un composant Lookup et n'insérer que les lignes en NoMatch
- Utiliser une table temporaire puis une instruction type MERGE en SQL (pour les plus grosses volumétries)
- Si jamais tu dois gérer des cas plus complexes d'historisation (genre comment gères tu les UPDATE?) tu peux utiliser le composant SCD - lent... - ou le custom TableDifference de Russo et Ferrari chez SQLBI http://www.sqlbi.com/?tabid=74. (Bon en custom il y a aussi Kimball SCD et un tas d'autres...)

[Hydre]

merci, je vais utiliser un filtre de date pour faire un chargement incrémental. Donc si j'ai bien compris, si j'exécute mon package plusieurs fois c'est normal d'avoir des doublons dans la dimension. On ne peut pas empêcher ca, sauf en vidant la base intermédiaire c'est juste ?

[Ptit_Dje]

Bonjour,

Pensez a definir un/des index unique(s) sur votre table, ca vous permettra aussi d'eviter les doublons.

Bonne journee

[FrancoisJehl]

Donc si j'ai bien compris, si j'exécute mon package plusieurs fois c'est normal d'avoir des doublons dans la dimension

Dis toi simplement que les destinations de Data Flow font des INSERT - et pas des UPDATE - (au sens SQL) dans les tables de destination, d'où le doublonnage. La mise à jour sur insertion c'est à toi de la gérer.