Discussion :

[maracujadobrasil]

Bonjour,

je travaille sous matlab et ai un problème avec un executable. Mon programme utilise des fichiers excel, j'utilise don la fonction xlsread. Quand j'execute mon programme à partir du fichier .m principal, je n'ai aucun soucis. Par contre, quand je lance le programme avec le .exe que matlab a compilé, j'ai une erreur dans mon xlsread, la console windows me renvoit un message (Erreur : espace de stockage insuffisant pour terminer l'opération).

J'utilise matlab R2008b, et ce fichier excel a une taille de 23Mo.

Quelqu'un a déjà eu ce problème et sait comment le résoudre

[Jerome Briot]

Travailles-tu sur une machine 32 ou 64 bits ?

As-tu réellement besoin de charger toutes les données du classeur Excel au même moment ?
As-tu essayé de fractionner la lecture en utilisant l'argument Range de xlsread ?

[maracujadobrasil]

Je travaille sur une machine 64 bits, mais le problème est le même sur une machine 32 bits.

En fait, je reprends un code complexe fait par d'autres personnes, et je préfère ne pas toucher à leur organisation pour pas me perdre plus tard. S'il chargent tout d'un seul coup, c'est qu'il doivent avoir besoin de tout.

Mais je répète que ce que je trouve étrange, c'est que quand je fait rouler le programme en le lançant à partir des sources matlab, aucun prob. C'est seulement quand j'utilise l'executable. Je pense que le problème vient pas de matlab car le message d'erreur inscirt dans la console est en français.

[Jerome Briot]

Je travaille sur une machine 64 bits, mais le problème est le même sur une machine 32 bits.

Les problèmes de mémoire ne s'améliorent généralement pas sur une machine 32 bits qui est par définition, plus limitée dans ce domaine qu'une machine 64 bits.

S'il chargent tout d'un seul coup, c'est qu'il doivent avoir besoin de tout.

Si j'étais toi, je commencerais par vérifier cette supposition

Le fichier Excel fait 23 Mo. Quelles sont les dimensions des variables à importer dans MATLAB avec xlsread ?
Peux-tu nous en dire un peu plus sur ce que contient ce fichier Excel ?

[maracujadobrasil]

Oui, ils ont besoin de tout

Le fichier excel contient 40400 lignes et DF colonnes. Il contient des chaines de caractères pour les titres, des nombre entiers (0 à 1 000 000 environ) et des cellules vides (pas mal de celulles vides mais il y a des cellules avec des nombres jusq'à la dernière ligne et jusqu'à la dernière colonne)

[Jerome Briot]

Impossible de reproduire le problème sur ma machine (Windows 7 64 bits)

Une matrice pleine de dimension 40400x110 fait approximativement 34 Mo (40400*110*8/1024/1024)

J'ai donc essayé ceci :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
X = rand(40400,110);
 
xlswrite('test.xlsx',X); % ou .xls

Puis j'ai compilé le code suivant avec deploytool :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
function testxlsread
 
X = xlsread('test.xlsx'); % ou .xls
 
m = mean(X(:));
 
disp(m);

L'exécutable fonctionne parfaitement que ce soit dans MATLAB ou directement dans une console DOS

Pourrais-tu essayer de compiler et d'exécuter ce même exemple très simple ?

[maracujadobrasil]

je vais essayer.

Je n'ai pas d'expérience en compilation de code matlab. Moi j'ai utilisé la commande mcc. Quelle est la différence avec deploytool?

[Jerome Briot]

deploytool est juste une surcouche graphique pour mcc

[maracujadobrasil]

ton exemple marche très bien.

En fait, j'ai vu qu'il ouvre premierement cette grosse matrice (40400 *113), il y arrive très bien. En fait, il plante dans le second fichier excel qui est de 15Mo, le même type de données mais de taille 27300*133

[maracujadobrasil]

Avec d'autres entrées (autres fichiers excel) mais moins volumineux (inférieurs à 10 Mo), mon exécutable marche.

C'est comme ci le programme utilisé à l'intérieur de Matlab pouvait accéder à plus de RAM que mon exécutable. Y a-t-il moyen lors de la compilation matlab d'informer la quantité de RAM maximum que l'executable pourra utiliser?

Y a-t-il une telle option? Je débute en compliation matlab, merci.

[maracujadobrasil]

Pour info, mon exécutable consomme au maximum (au moins jusqu'au point où il plante) 1Go de RAM. Mais au moment de planter il ne consomme que 700Mo.

J'ai 8Go de RAM, clairement ma machine a encore des ressources (encore de la RAM non utilisée). Pourtant, j'ai ce message d'erreur dans la console windows "Espace de stockage insuffisant pour continuer l'opération (message en français, donc provient pas de matlab)". Ce qui me porte donc à croire que j'ai une limite de RAM accessible par mon exécutable plus petite que la limite de RAM accessible par Matlab.

[Jerome Briot]

Quel compilateur utilises-tu ?

Pourrais-tu nous montrer le code MATLAB ?
Comme je l'ai dis précédemment, il faudrait essayer d'importer les données par morceau (par block de colonnes par exemple) plutôt que l'intégralité en une seule fois.

Et si possible nous communiquer un fichier Excel qui fait crasher l'exécutable
Tu peux le mettre sur un site de stockage en ligne (si il n'y a pas de problème de confidentialité bien entendu)

[maracujadobrasil]

J'utilise Matlab R2008b, avec le MCR 7.9 MC4.9.

Malheureusement, pour problème de confidentialité , je ne peux transmettre aucun code. Mais sais tu si un executable peut seulement utiliser un maximum de RAM qui ne soit pas la limite physique de RAM de la machine?

Autre point, le programme tourne quand je le lance à partir de la console matlab. J'ai vu qu'avec la fontion pcode on peut coder ses fichiers .m en .p(incompréhensibles par un être humain à première vue). Sais tu s'il est parfaitement impossible de repasser à um .m à partir d'un .p?

Merci

[Jerome Briot]

J'utilise Matlab R2008b, avec le MCR 7.9 MC4.9.

Je voulais connaitre le compilateur utilisé
C'est indiqué dans l'entête du fichier compopts.bat que tu trouveras dans le dossier des préférences MATLAB.
Le chemin vers ce dossier est donné par la fonction prefdir

Mais sais tu si un executable peut seulement utiliser un maximum de RAM qui ne soit pas la limite physique de RAM de la machine?

Oui et non.

Le problème ici, c'est que tu demande à un exécutable de lancer MATLAB qui lui-même fera appel à Excel. D'autre part, le message d'erreur vient de EXcel.
Donc ce n'est pas si simple...

Sais tu s'il est parfaitement impossible de repasser à um .m à partir d'un .p?

"Parfaitement impossible", non.
Mais très difficile voire impossible pour 99,9% des utilisateurs, oui

Le seul soucis est que MATLAB est nécessaire sur la machine cible pour exécuter du pcode.

Voir la FAQ : Comment protéger son code ?

Tu va trouver que je radote, mais je suis quasiment sûr qu'en fractionnant la lecture des données, le problème sera résolu.

L'argument Range est-il utilisé avec xlsread ?
Les données sont-elles monobloc ?
Ou peuvent-elles être séparées colonne par colonne ?

[maracujadobrasil]

Je peux essayer d'ouvrir xlsread avec l'option range, mais je pense que c'est peu probable que ce soit le problème, car l'executable arrive déjà parfaitement à ouvrir le fichier excel de 23Mo, mais il bloque sur l'ouverture du fichier de 15 Mo.

Une question: pour utilisant plusieurs xlsread en "découpant" le fichier, il y a bien un moment où je suis obligé de connaître les dimensions complètes de mon tableau excel. Comment je fais pour avoir accès à cette information si je n'arrive pas à ouvrir le fichier? Existe-t-il une fontion qui permet d'accéder à cette information sans avoir à charger le contenu du tableau excel?

[maracujadobrasil]

voilà ce qu'il y a dans mon fichier compopts.bat

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
rem ********************************************************************
rem Compiler parameters
rem ********************************************************************
set COMPILER=lcc
set OPTIMFLAGS=-DNDEBUG
set DEBUGFLAGS=-g4
set COMPFLAGS=-c -Zp8 -I"%MATLAB%\sys\lcc\include" -noregistrylookup 
set DLLCOMPFLAGS=-c -Zp8 -I"%MATLAB%\sys\lcc\include" -noregistrylookup 
set NAME_OBJECT=-Fo

[Jerome Briot]

Le compilateur Lcc livré avec MATLAB est une version 32 bits...

Es-tu sûr d'utiliser une version 64 bits de MATLAB ?

=> FAQ : Comment savoir si ma machine est une architecture 32 bits ou 64 bits ?

Sinon, quels sont les compilateurs proposés par MATLAB ?

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

mbuild -setup

[maracujadobrasil]

Ma machine est une 64 bits, mais mon matlab est une version 32bits

[Jerome Briot]

Tu génères donc un exécutable 32 bits.

As-tu la possibilité d'installer une version 64 bits de MATLAB ?
Tu peux faire cohabiter plusieurs versions de MATLAB sur une même machine.

[maracujadobrasil]

L'executable est livré à des clients qui travaillent sur des windows 32bits, et l'executable donne la même erreur chez eux.

Tenter de compiler l'executable avec le même matlab mais sur une machine 32 bits (ma machine, sur laquelle je compile le code a un windows 64 bits mais le matlab est une version 32 bits) pourrait peut-être résoudre le problème?