Parcourir resultset en un minimum de temps

[nddvlp]

Bonjour à tous,

j'effectue une requête SQL qui me retourne un résultat contenant environ 50 000 lignes que je désire afficher dans une jtable.

J'obtiens des temps d'environs 65 sec pour effectuer celà.
Je trouve ce temps élevé et aimerai optimiser mon code.

L'étape consommant le plus de temps (environ 60 sec) est la suivante :
dans le Model associé à ma JTable, je stocke les données de mon ResultSet dans un ArrayList.

Code :

1
2
3
4
5
6
7
8
 
Resultset resultat;
 
do
{
 
}
while(resultat.next());

En ne faisant aucun traitement dans ma boucle (uniquement next()), cette étape me prend environ 60sec.
J'ai essayé de paramétrer le nombre de lignes à récupérer en faisant ceci :

Code :

1
2
3
 
resultat.getStatement().setMaxRows(100000);
resultat.setFetchSize(5000);

mais celà n'a pas changé grand chose.
Je ferme correctement mes ResultSet, Statement, Connexion.
J'utilise également un PreparedStatement.

Quelqu'un aurait-il une idée pour améliorer les performances?

Merci d'avance

[gandalf72000]

Montres nous ta requête. Tu as quel index pour cette requête?

[tchize_]

Chaque appel à next va créer des objets correspondants à la ligne. Si on suppose que tu n'as que 10 colonnes de type String, t'es quand même gentillement occupé de demander à java de créer et détruire 500.000 Objets. Il ne faut par regarder que le nombre de lignes mais aussi la mémoire que ça occupe.

Vu que, en général hein, on ne sais pas afficher plus de 80 lignes à la fois à l'écran, on se demande l'intérêt de pomper 50.000 lignes d'un coup plutot que 100 lignes à la fois

Maintenant, certes, 60 secondes c'est beaucoup, et il faudrait aussi regarder quelle quantité ça occupe sur la couche réseau. Si chaue ligne occupe 10Ko de données (avec des varchar tout plein ça chiffre vite), t'es quand même occupé de faitre transiter 500M sur le réseau

[sebabarre]

Envoyé par nddvlp

Bonjour à tous,

j'effectue une requête SQL qui me retourne un résultat contenant environ 50 000 lignes que je désire afficher dans une jtable.

Si c'est pour afficher dans une JTable, autant faire un "page à page", et récupérer tes objets par paquets de 100 à chaque changement de page.