[Linux] mémoire consommée fantôme

Bonjour,

Je travaille actuellement sur une application java sous Linux RH4.

Cette application permet entre autre de lancer des algorithmes en C via JNI.

Et, évidement, nous avons un problème que l'on ne comprend pas.

Mise en situation :

Nous lançons notre application, puis nous exécutons l'algorithme.
Jusqu'ici tout ce passe bien sans problème, les résultats attendus sont bon.
Nous relançons le même algorithme, et l'exécution se passe sans problème également.
Le problème n'intervient que à la 3ème exécution, ou l'application plante.

Après plus d'un semaine d'investigation, nous supposons que le problème vient de la gestion de la mémoire lorsque l'on utilise JNI, et que à chaque exécution nous recréons des objets sans détruire les précédent utilisés.

Nous avons donc tenté d'utiliser plusieurs profiler afin de déterminer d'où provenais le problème. Mais malheureusement sans succès.

Suite à ces observations, plusieurs questions se pose à nous :

1) Lorsque l'on lance l'application, celle-ci consomme 1.3Go de mémoire virtuelle et 55Mo de mémoire RES (infos extraite de 'top'). D'où sorte ces 1.3 Go de mémoire virtuelle ?

2) Lorsque l'application plante, nous consommons toute la mémoire virtuelle, soit environ 8Go. Comment se fait il que l'on augmente autant notre consommation de mémoire ?

3) Et enfin, connaissez vous un outil nous permettant de visualiser le détail de la mémoire utilisée par notre application, sachant que l'on utilise JNI, et que pour l'instant, on n'arrive pas à voir la quantité de mémoire utilisé par nos algo.

4) Pourquoi ce titre ? bein parce que l'on arrive pas à voir cette mémoire caché et comprendre pourquoi notre appli en consomme autant.

Je me rend bien compte que ma question peut rester encore très vague, mais je me ferais un plaisir de vous donner toutes les infos qui vous serais nécessaire afin de nous orienter vers une quelconque piste.

Je vous remercie de votre aide par avance.

Si vous retirez la couche JNI et qu'à la place vous mettez une petite classe qui donne un résultat bidon -> même phénomène?

Si pas, il y a fort à parier que ce sont vos lagorithmes qui font des malloc comme des cochons sans jamais les libérer. La mémoire dans la partie native est de la responsabilité du code natif, tout ce qui est coté java est géré par le garbage collector. Pour la partie native vous pouvez utiliser je pense des outils comme valgrind pour repérer les malloc non libérés.

Effectivement, j'ai oublié de mentionné le fait que nous avons écarté le fait que nos algo avait des fuites mémoire à l'aide de purify.

Nous les avons lancé une dizaine de fois sans jamais obtenir de plantage de leur part.

Le plantage n'intervient uniquement lors de l'utilisation conjointe avec notre application.

Nous avons voulu également tenté d'utiliser Valgrind afin de voir quelles infos nous pourrions obtenir, mais malheureusement, nous n'avons pu le lancer.

En effet, celui-ci nous donne un "segmentation fault", et évidement quitte l'exécution au démarrage de l'application.

Toutes nos tentatives de lancement via "valgrind" ont lamentablement échoué :calim2:

Mais nous aimerions beaucoup pouvoir réussir.

et avez vous confirmé que le coté algorithme java n'est pas en cause? en gardant en mémoire des object volumineux créés par la couche jni?

De ce côté là nous n'en somme pas absolument certain. Mais il semble tout de même que les problème java "pur" soient à écarter.

On suppute fortement que le problème viendrait éventuellement des classes JNI crées qui font le lien entre notre application java et les algo.

On imagine effectivement que l'on crée des objects sans les détruire ensuite.

J'ai essayer d'utiliser la fonction DeleteLocalRef et DeleteGlobalRef, sans grand changement, tout du moins visible.

A moins que je ne les utilise pas correctement....:roll:

Je tient à préciser que ce n'est pas moi qui est écrit les programmes, et je ne fais que les débuggés. Et il est fort possible que mes lacunes en JNI, ne m'aide pas énormément dans ce cas là.

Y aurais t il des piste à explorer du coté des classes C qu'il y a entre Java et les Algo ?