requête conséquente et intégration dans le code

[Rabbit57]

Bonjour à tous ,

Je suis en train de développer une application en java et je dois effectuer des traitements sur une base de données access. Je dois effectuer des traitements sur une ensemble conséquent de lignes (+ d'un million de lignes) et je ne peux donc pas charger les données en mémoire (un objet = une ligne) avec un design pattern comme active record sans risquer une "out of memory" exception.
Pour le moment, j'utilise des resultSet dans mon contrôleur. Cependant, j'aimerais pouvoir dissocier de manière propre mes données et mes traitements.
Quelqu'un aurait-il un idée ou un design pattern à me suggérer pour traiter ce type de problématique ?

Merci d'avance.

[h2s84]

Salut,

Je ne pense pas qu'un design pattern corrige ton problème de out of memory.
Le plus simple est d'effectuer les traitements par lot (10, 20, 50 ou 100). Une fois le traitement sur le lot effectué, tu vides la mémoire et tu charges les lignes suivantes. Ainsi de suite jusqu'à ce que toutes tes lignes soient traitées.