Mise à jour en temps des réel des données du Data Warehouse

Bonjour,

Voila la situation. Nous avons des bases de production qui sont sur DB2 sur AS400 et à côté, nous avons SQL Server 2005 Enterprise pour le reporting.
La problématique sur laquelle je dois me pencher serait un reporting en temps réel dans SQL Server en se basant sur les données entrées dans les bases DB2. Pour autant que je sache, ca risque d'être compliqué voire impossible mais je demande à tout hasard. A noter que le but serait d'avoir des cubes accessibles depuis Excel avec les données à jour en temps réel pour un volume de données relativement conséquent. A l'heure actuelle, on fait une mise à jour complète par mois qui prend environ 3h pour tout faire (ETL + cube).
Je suis pour l'instant qu'en phase d'étude donc tout avis est bon à prendre.

Merci d'avance.

PS : Pour taper dans les bases DB2, on doit passer par des liens ODBC qui se sont montrés pas très rapides mais le OLE DB est bien pire.

Sallut,
D'après mes connaissance Sql Server 2005, il est possible de faire de la mise à jour en temps réél avec Analysis Services, mais Analysis Services doit se nourrir de quelque chose, et c'est ta base de données SQL Server dans ce cas la...
Les solutions que je connais sont lourdes (triggers, réplication), surtout pour des bases de production. Sinon, tu peux créer directement des cubes à partir de tes sources de données (CE QUI N'EST PAS BON DU TOUT) avec SSAS, tu bénéficira ainsi d'une mise à jour en temps réél, mais à quel prix ...

Merci de la réponse.

C'était effectivement une des choses à laquelle j'ai pensé sauf que faire un cube qui tape dans une base DB2 en ODBC, ca marche pas ou mal.

Un autre point qui me turlupine également c'est comment mettre à jour le cube. Si on le process 15 fois par jour, ca va le rentre inaccessible pendant le process et ca va faire exploser le disque. Meme avec des partitions, ca risque de poser probleme (la cible étant la finance, les volumes de données sont assez importants).

Voila pour toi,
http://www.microsoft.com/emea/spotli...0116974C349372

Je ne l"ai pas encore vu, on en parlera plus tard ;)

Merci pour ta question, ça m'a permis d'en apprendre sur le real time olap avec SSAS. Prudence parcontre avec l'utilisation de cette fonctionnalité, sa ne m'étonnerais pas que les performances ne soient pas au rendez vous avec les gros volumes de données

Merci pour le lien mais ca ne marche pas sur mon ordi. Je regarderais à partir d'un autre ordi.

Pour ce qui est des ressources, c'était clair sans meme commencer à s'interroger sur quoi que ce soit que ca allait etre un des points clé.

Bonjour,

Pourquoi tu te contentes pas d'une importation quotidienne, toute les nuits, a la place de la mensuelle, car aller vers du lien direct ca risque d'étre très lourd a gérer.

Personnellement, ca fait 4 ans que je suis sous 2k0 et je passe actuellement sous 2k5... Sous 2k0 j'avais 7 heures de traitenement (Importation de 10go d'un AS400 + reconstruction des cubes ) et ca a toujours très bien marché. A noté que sous 2k5 les temps de traitement sout divisés par 2.

Bonjour,

En fait, à l'heure actuelle, on fournit des rapports de facon mensuelle pour une utilisation plusieurs manageriale. De toute facon, ces refresh mensuels ne changeraient pas.

Pour le temps réel, la cible est autre, plus opérationnelle et lors des clotures comptables, il y a un besoin de données en temps réel pour la consolidation etc...

Comme je le disais, ce n'est qu'une étude de faisabilité mais ce projet basé sur SQL Server est récent et on est en train de le développer pour plusieurs services.

Par contre, tu devais avoir pas mal de cubes parce que on récupère 40 Go de données dans nos bases avec 1 cube et ca nous prend pas plus de 3h.

j'ai fais 1 cube par grand thème, j'ai environ 15 cubes, mais le traitement de chacun va de 5 minutes a 1h30 maxi.