Discussion :

[thibal]

Bonjour,

J'ai une base MySQL qui comporte une table avec plus de 100.000 lignes et 4 colonnes.

J'aimerai pouvoir faire un:

SELECT *
FROM le_nom_de_ma_table;

Et afficher ce resultat dans une page web grace a l'intermediaire de java
(par le biais d'un resultset),
le probleme c est que je n'ai pas suffisament de memoire pour pouvoir
afficher ces 100.000 resultats d'un coup.

Ma question est donc :

Est il possible de recuperer les resultats d'une requete en plusieur fois ou
alors faut il que je stock mes resultats dans un fichier que je lirai apres.

Voila si vous avez deja rencontre ce probleme et que vous avez une solution ca m'interresse.
Vous vous en doutiez ?

Merci et bonne journée

[BiM]

Je ne sais pas si tu peux faire de la pagination directement avec une requête cependant je sais que sous Oracle, il est possible de créer ta propre pagination grâce aux RowId, "colonne cachée".

[thibal]

Ouai mais j'utilise MySQL et je ne peux pas utiliser autre chose.
PHPMyAdmin arrive a afficher les resultats d'une requete

SELECT *
FROM nom_table;

mais je ne sais pas quelle methode il utilise.
Est il possible d'afficher les resultats sans les stocker?

[phlip]

Existe-t-il une seule personne capable de lire tes 100000 lignes ?

Si non, pourquoi vouloir toutes les afficher ?

Si c'est pour un processus distant, pourquoi ne pas lui fabriquer un fichier, qu'il récupérerait par un get http, par exemple ?

[BiM]

Justement c'est ce qu'il veut éviter.

En fait, tu utilises quel langage WEB, car en ASP.NET la pagination est assez simple en fait, en Java aussi. Mais tu devrais faire un truc du genre tu lis les premiers résultats jusqu'au millième et ensuite tu dis : "Veuillez préciser votre recherche afin d'obtenir des informations plus précises !"

Dans un des logiciels que j'ai créé, on dois chercher les commandes, sachant que c'est en WEB, quand il y a plus de 50 résultats, je dis que j'en affiche que 50 et qu'ils pourraient affiner la recherche.

Tu sais, j'ai peur qu'avec une requête aussi grosse ta page ne s'affiche jamais, ou alors il faudra la paginer. En PHP, j'ignore si c'est possible...

[phlip]

En fait le problème d'écrire une page web de 100000 lignes est secondaire.

Le principal obstacle est de faire tenir en mémoire le ResultSet d'une requête retournant 100000 rangées.

Peut être la solution est elle d'exécuter bcp de requêtes de taille moyenne, par exemple 100 requêtes retournant chacune 1000 lignes.

il faudrait pouvoir trouver un critère qui permette de séparer les 100000 lignes en groupes de taille à peu près semblables :

- une plage d'id :
SELECT * FROM nom_table where id between a and b;
- une date :
SELECT * FROM nom_table where date between a and b;

... ou autre chose!

[thibal]

C est vrai que ca n'a pas un grand interet d'afficher les 100000 reponses je pense que je ne vais afficher que les n premier resultats et faire un bouton pour pouvoir afficher les n suivant ainsi de suite.
Le langage web que j'utilise est Java.
Cette solution me semble pas mal du tout pour n'afficher q'un nombre limité de reponses.
SELECT * FROM nom_table where id between a and b;

>Tu sais, j'ai peur qu'avec une requête aussi grosse ta page ne s'affiche >jamais
Oui effectivement apres reflexion, il y a de grande chance pour que cela arrive.

>, ou alors il faudra la paginer.
Je ne connais pas la pagination

Merci a vous tous