Discussion :

[Borowsky]

Bonjour,

Ma question peut paraître assez bête mais j'aurais aimé savoir s'il y a une grande différence de performance dans le traitement des données entre une base de données qui se trouve en local (EasyPHP en localhost) et une base de données qui se trouve sur un serveur.

Car actuellement je travail sur une solution de Business Intelligence et j'ai une base de données en local avec des tables qui ont plus de 100 000 enregistrements et je n'arrive plus à sortir grand chose tellement le traitement est long.

J'ose espérer que quand la solution aura été mise en place sur un serveur, la vitesse de traitement sera grandement améliorée !
En gros j'aurai voulu savoir si c'est la solution qui est limité (Pentaho pour les connaisseur) ou si c'est le fait que je travail en local ?
Car avec des bases de données moins volumineuses, il n'y avait pas de problèmes de performances...

Merci d'avance de vos éclaircissements !

PS : J'espère que je post au bon endroit

[chrifo]

Bonjour,

On ne peut pas vraiment vous répondre, tout dépend de votre poste, du serveur, de ce qu'il héberge déjà, de la nature des traitements, et de tant d'autres choses. C'est pour cela qu'une plate-forme de développement doit toujours être conçue en connaissant la cible de production, surtout en BI.

Dans votre cas particulier, je ne sais pas ce que vous gérez, mais 100 000 enregistrements c'est une volumétrie assez faible, alors si ça rame déjà ...

Concernant pentaho, je ne ferai pas de jugement de valeur, mais c'est très orienté présentation c'est bien ça ? Dans votre cas le problème semble être bien en amont de cela.

[Borowsky]

Ok. Je vous remercie de votre réponse.

Oui la face visible de Pentaho c'est surtout de la présentation via une interface web. Mais pour charger chaque page de cette interface web, qui peut contenir des tableaux de bord, des cartes via Google Maps, des rapports etc... il faut exécuter des requêtes sur des bases de données.

Et ce sont donc ces requêtes qui dans mon cas prennent énormément de temps lorsque la base de données que j'ai en local devient plus volumétrique.

Je travail seulement en local pour l'instant pour faire des tests. Au début j'utilisais très peu de données donc les requêtes se faisaient rapidement. Mais depuis, j'ai essayé de travailler avec une partie des vrais données que cette plate-forme utilisera en copiant une partie des tables qui sont sur un serveur X vers mon PC en local via easyPHP.
Et c'est donc à partir de ce moment là que les problèmes de lenteur sont arrivés... Mais à quoi sont-ils dus...

[Jester]

Il y a des index sur les tables? Sinon demandez à un administrateur de DB ou un développeur BD de configurer mysql pour faire un rapport sur les requêtes lentes et qu'il vous explique pourquoi.

[Borowsky]

Il y a des index sur les tables? Sinon demandez à un administrateur de DB ou un développeur BD de configurer mysql pour faire un rapport sur les requêtes lentes et qu'il vous explique pourquoi.

Merci bien !

J'ai ajouté des index à mes tables et ça fonctionne parfaitement maintenant !

Je vous remercie ! Je ne suis pas du tout un expert en base de données et à vrai dire je ne connais pas trop le principe des index... mais je vais me renseigner la dessus car ça a l'air d'avoir une conséquence assez importante sur la rapidité de traitement des requêtes !

Encore merci et à bientôt peut-être !

[Jester]

C'est comme la différence entre une liste chaînées et un treemap/set en algorithmique.