Discussion :

[fennec62]

Salut

Voila j ai creer un viewer de pdf avec defilement de valeur en temps reel issue d une base sql ip21

Le programme tourne en continu 24/24 7/7

Je remarque la memoire vive utiliser par pythonw croit de jours en jours c est pas enorme mais la en 2 jours je passe de 93mo a 170mo

J ai lu que l itemconfigure que je me sert pour cree le defilement de texte genere cette augmentation de memoire sous python 2.7 donc de temps en temps je delete ALL et je recree les create_text

J ai 3 grids avec after x seconds qui tournent

Y a t il une chose a faire ou ne pas faire pour empecher cette monte de consommation de memoire

Genre de temps en temps arreter after et relancer simplement

Merci de vos conseilles

[wiztricks]

Salut,

Sous quel OS et avec quels outils avez vous mesuré la mémoire occupée?

- W

[fennec62]

Windows avec taskmgr

J ai remarque ca puisqu au bout de 7 jours j ai mon defilement de texte qui a ralenti et j ai meme eu une erreur plus de memoire pour gswin32c.exe qui transforme mes pdf en jpg dans un thread lance completement a part dans un subprocess.popen d ailleurs ce thread sur 7 jours ne bouge pas de 20 mo

Le probleme est vraiment dans le mainloop de tkinter

J ai bien regarde que mes listes ce vide bien je del meme des listes avant de les mettres a jours avec les nouveaux pdf

Mais rien ca augmente toujours

[wiztricks]

Salut,

Si la mémoire utilisée augmente, c'est qu'à priori vous oubliez (involontairement) de la libérer ou qu'il y a un bug dans les bibliothèques que vous utilisez. Si on veut faire cela de façon scolaire, on dumpe les différents objets contenus dans la mémoire Python puis on fait des hypothèses sur la cause en fonction de ce qu'on trouve, et on essaie de comprendre pourquoi le code "oublie" de... On corrige, on re-teste...
On peut aussi apprendre à mieux programmer - mais on n'a pas le temps.
On peut être délibérément "sale", i.e. redémarrer le process tous les X traitements histoire de libérer la mémoire.
note: réciproquement, si vous ne voulez pas devoir redémarrer le programme tous les X, il faut être plus balaise côté qualité du code, tests, instrumentations.... i.e. pour une ligne de code de l'application, vous en avez 5 fois plus dans les plans de tests et le design.

- W

[fennec62]

Merci w

Comment dumpe les differents elements ? Pour commencer a controler tout ca

[wiztricks]

Salut,

Il faut commencer par instrumenter avec le module "gc".
Vous avez des indications sur comment çà fonctionne chez Doug Hellman.

- W

[fennec62]

J ai regarde gc

J ai donc ajoute dans une boucle de mon script

Sachant que normalement le nombre de variable ne varie pas

Je charge toujours le meme nombre de variable donc le nombre devrait etre constant

Je scan les pdf dans un dossier je l ai affiche puis au dernier pdf je recharge la meme liste de pdf et je recommence

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
n=gc.collect()
print n

Je commence

341
454
854
1544
1162
522
1193


Y a un moyen d avoir cette liste de variables

Merci

[wiztricks]

gc.get_objects()?
- W

[topic]

Y'a cette vidéo de Victor Stinner qui peut peut être s'avérer utile.

[fennec62]

Merci pour la video

Je pense que mon probleme est lie a un cycle de reference

J ai mon gui qui tourne puis a un certain moment je met a jour une liste qui servira a un itemconfigure

La mise a jour a lieux dans un thread

Mais pour la mise a jour je fait

a=b

Ou a liste dans le gui et b liste dans le thread

A mon avis cela cree un cycle de reference

Si je remplace par

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
b=[]
for i in a :
 b.append(i)

Donc a chaque mise a jour du gui je vais lancer ceci

Cela va t il eviter un cycle de reference

Merci

[wiztricks]

Salut,

Comment "A = B", i.e la création d'une variable à laquelle on assigne une liste existante pourrait introduire un cycle?
note: s'il n'y a pas de cycle à défaire, pas la peine de regarder la solution à un no-problem.

- W