Discussion :

[Tidus159]

Bonsoir,
dans le cadre d'un projet, je dois utiliser des fichiers.
J'ai un petit soucis avec ma classe de lecture de fichier. Je l'ai implémenté, elle fonctionne sur des petits fichiers... Mais quand je m'attaque à un gros fichier ( 300 Mo), je reçois une méchante exception OutOfMemory...

Voici ma classe :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
 
import java.io.* ;
public class LectureFichier {
	public static String read(String filename) throws IOException {
	BufferedReader in = new BufferedReader(new FileReader(filename)) ;
	String s ;
	StringBuilder sb = new StringBuilder() ;
	while ((s = in.readLine()) != null){
	sb.append(s + "\n") ;
	}
	in.close() ;
	return sb.toString() ;
	}
 
}

Je mets tout simplement tout le contenu de mon fichier dans une variable après avoir instanciée ma classe.

Et voici l'exception :

Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
at java.util.Arrays.copyOf(Unknown Source)
at java.lang.AbstractStringBuilder.expandCapacity(Unknown Source)
at java.lang.AbstractStringBuilder.append(Unknown Source)
at java.lang.StringBuilder.append(Unknown Source)
at LectureFichier.read(LectureFichier.java:8)
at ProgrammeDeTest.main(ProgrammeDeTest.java:74)

Cela ne peut pas venir de mon PC car avec mon Go de ram libre, ça doit passer...

Avez vous une idée ? Une solution ?

Merci par avance.
Cordialement,
Tid.

[tchize_]

http://java.developpez.com/faq/java/...ParApplication

regarde du coté des péramètres xmx pour augmenter la taille mémoire de la jm: http://jmdoudoux.developpez.com/cour...-jvm.php#jvm-6

[Djobird]

Ou essais plutôt, si tu as la possibilité, de traiter groupe de lignes par groupe de lignes.

[Tidus159]

[Edit]
Effectivement, en travaillant ligne par ligne, le programme tourne plus vite.
Malheureusement j'ai toujours l'exception, c'est un peu génant... mais c'est peut être pour ça que ma structure de données doit être changé.

Merci !
@+,
Tid.

[dinobogan]

Malheureusement j'ai toujours l'exception, c'est un peu génant... mais c'est peut être pour ça que ma structure de données doit être changé.

Il ne faut absolument pas mettre tout le fichier en mémoire. C'est long et inutile.
Utilise à la place un BufferedReader et la méthode read sur un tableau de char.
Tu vas lire le fichier par paquet de caractères, et tu vas construire le mot courant dans un StringBuilder. Lorsque le mot est entier, tu sauves le mot la ou tu veux, tu vide le StringBuilder et tu continues jusqu'à lire tout le fichier.
L'avantage de cette méthode est que tu peux lire des fichiers de taille potentiellement infinie (si on met de côté les limites système).

[Invité]

Ou regarde du côté de NIO, plus précisement des "Memory-Mapped I/O" et de MappedByteBuffer