Discussion :

[black cat747]

Bonjour,

J'ai un problème lors de l'execution de mon interface Matlab. Il m'affiche :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
??? Error: Mémoire insuffisante pour cette opération.
 
Error in ==> interface>power_calculation_Callback at 306
    OATS = xlsread(strcat(dossier,Affaire,'\',Affaire,'_OATS10m.xlsx'));

Le fichier ouvert est un fichier excel de 600 000 lignes et 18 colonnes, donc assez gros. Existe-il un moyen "d'augmenter" la mémoire de Matlab? ou de contourner le problème?

Merci d'avance

[Jerome Briot]

Le fichier ouvert est un fichier excel de 600 000 lignes et 18 colonnes, donc assez gros.

C'est bizarre. La taille de la matrice n'a rien d'exceptionnelle

Une matrice 600000*18 en classe Double prend un peu plus de 80 Mo de mémoire (voir la : Comment déterminer approximativement la quantité de mémoire nécessaire pour le stockage d'une variable ?)

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

OATS = xlsread(strcat(dossier,Affaire,'\',Affaire,'_OATS10m.xlsx'));

Cett ligne s'écrit plus proprement :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

OATS = xlsread(fullfile(dossier,Affaire,[Affaire '_OATS10m.xlsx']));

Voir aussi la : Comment concaténer le nom d'un fichier et celui d'un répertoire ?

[black cat747]

Merci pour ta réponse rapide Dut !


J'ai modifié la syntaxe de monde code de lecture de fichier. Cependant ca ne change pas le problème de mémoire.
J'ai bien lu le lien que tu m'a envoyé mais je ne vois pas trop comment le mettre à contribution...C'est possible de changer le tableau OATS de classe double en classe single?

Je suis un peu bloqué...

[Jerome Briot]

Pourrais-tu attacher le fichier xls (si sa taille n'est pas trop grosse) ?

[vampirella]

Bonjour black cat,

Si je ne me trompe pas, il faudrait modifier directement sur Excel les cases pour lui spécifier que ce sont des entiers simples.

Tu peux temporairement contourner le problème en lisant six colonnes différentes en trois fois, mais cela te rallongera à peu près de trois fois aussi le temps. L'ouverture d'un fichier conséquent prends pas mal de temps.

[black cat747]

Euh le fichier fait 115 Mo
Je vais essayer de le compresser pour voir mais c'est pas gagné !

Au pire je modifierai mon code pour gérer l'ouverture des fichiers .txt et non .xlsx !

Merci pour vos réponses !!!

[Jerome Briot]

Au pire je modifierai mon code pour gérer l'ouverture des fichiers .txt et non .xlsx !

Essaie de lire le fichier en l'enregistrant préalablement (et si possible) au format xls et non pas xlsx.

Le format xlsx est de type XML, ce qui pourrait éventuellement expliquer le problème de mémoire...

[black cat747]

Le problème (et c'est pour ca que je suis passé sous Excel 2007), c'est que les fichiers xls ne contiennent que 65000 lignes...donc mon fichier ne s'ouvre pas en entier

[vampirella]

Dans ce cas, une des solutions est de passer au format .CSV : lisible avec Excel 2000 et plus, il peut contenir beaucoup plus de lignes (de mémoire c'est 10 fois plus, mais pas sûr) pour moins de place, et xlsread tolère sa lecture.

[black cat747]

Merci pour ton aide vampirella !
Mais visiblement même en csv sa prend trop de place mémoire.
Ce qui est étrange c'est qu'en observant les performances dans le gestionnaire des tâches, durant l'éxecution du programme, l'ordinateur n'est vraiment pas au max de ses capacités (j'ai mis ses caractéristiques en pièce jointe)

[Jerome Briot]

Que retourne la commande suivante sous MATLAB avant d'utiliser XLSREAD ?

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

memory

Et à tout hasard, combien de feuilles y-a-t-il dans le fichier xls ?

Sinon as-tu essayé en sauvegardant le fichier au format XLSB ?

[black cat747]

J'ai essayé

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

memory

mais rien ne se passe...je ne le fait peut être pas bien :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
memory   
OATS = xlsread(fullfile(dossier,Affaire,[Affaire '_OATS10m.xlsx']));

Il n'y a qu'une seule feuille dans le fichier.
J'ai essayé en xlsb mais sans succès...

En tout cas merci de ton aide Dut et pour toutes les solutions que tu proposes

[Jerome Briot]

La fonction MEMORY doit normalement retourner des informations sur l'état de la mémoire dans le Command Windows de MATLAB. Tu peux même y taper la commande directement.

[Jerome Briot]

J'ai essayé en xlsb mais sans succès...

C'est à dire ? Tu obtiens toujours la même erreur ?

[black cat747]

Oui, toujours mémoire insuffisante

[Jerome Briot]

Essaie en fractionnant la lecture comme vampirella te l'a déjà suggéré (lis 100 000 lignes à chaque fois par exemple)

Il faudra renseigner l'argument d'entrée range de la fonction XLSREAD