Discussion :

[mathieu_r]

Bonjour,


Je traite des lots de données spatialisées répartis par thématiques et découpés par départements que j'agrège au niveau régional grâce à rgdal.

Le script traite chaque lot un à un de façon incrémentielle au sein d'une boucle jusqu'à ce que toutes les thématiques aient été traitées.

A chaque passage de boucle et donc de thématique, l'objet agrégat régional est remplacé par le nouveau, correspond à son thème.

Le problème que je rencontre est lié aux performances. Au bout d'un certain temps, d'un certain nombre de passages de boucle, le logiciel ralentit, s'interrompt, jusqu'à planter.

Lorsque je redémarre R sur le dernier lot traité, alors le traitement se fait sans ralentissement. Mais aux prochains lots, la lenteur se fait à nouveau sentir..

Auriez-vous des pistes afin de pallier à ce ralentissement ?


Bien cordialement.

[ced]

Ah ! R et les gros volumes de données...
As-tu déjà exploré les pistes de suppression des objets inutiles en fin de boucle, puis un bon gc() avant de repartir dans la boucle suivante ?

[mathieu_r]

Bonjour,

Et merci pour la réponse.

Non, je n'ai jamais essayé.

En gros, tu proposes d'utiliser un rm des objets inutiles puis un gc() ?

[ced]

Oui, c'est bien ça. Ça devrait éviter l'augmentation d'utilisation de mémoire au fur et à mesure des boucles.

[mathieu_r]

ok merci beaucoup pour l'aide !