extraction d'un gros fichier ifstream::getline

Version imprimable

Bonjour,
j'ai un fichier de 100Mo qui contient le nom d'un fichier, un retour à l ligne, son contenu en base64, etc

Code:

1
2
3
4
5
6
 
image1.jpg
aAbgkjasjshka(contenu base64 très long)
image2.jpg
hjsgjgasjha(contenu base64 très long
etc

Je cherche à extraire le contenu base64 d'un fichier en fonction de son nom, mais sans extraire chaque contenu à chaque fois, vu que c'est volumineux.

J'ai fait :

Code:

1
2
3
4
5
6
7
8
9
 
while ( fichier.getline(Buffer, 20)) // 20 est petit, car on ne cherche que des noms de fichiers donc 20 est assez grand et il ne lira pas les immenses paquets de données des contenus
{
                if (strcmp(Buffer, Fichier_cherche.c_str()) == 0)
                {
                        char Buffer2[17Mo x 1024Ko x 1024 O]; // 17Mo afin de pouvoir mettre tout le fichier
                        fichier.getline(Buffer2, 17Mo x 1024Ko x 1024 O);
                        return Buffer2;
                 }

Mais la boucle s'arrête après avoir testé la première et la seconde ligne.
Savez-vous ce qui se passe ?

Merci

Tu exploses ta pile ! De mémoire, elle est de 1 Mo par défaut.
Tu as 2 solutions:
1/ Pas propre: augmenter la taille de ta pile dans les options de link -> danger: le jour où ton tableau grandit, il faut recommencer l'opération!
2/ Tu remplace l'allocation de Buffer2 sur la pile par une allocation sur le tas :

Code:

1
2
3
4
5
6
7
8
while ( fichier.getline(Buffer, 20)) // 20 est petit, car on ne cherche que des noms de fichiers donc 20 est assez grand et il ne lira pas les immenses paquets de données des contenus
{
                if (strcmp(Buffer, Fichier_cherche.c_str()) == 0)
                {
                        unsigned char *Buffer2(new unsigned char[17Mo x 1024Ko x 1024 O]); // 17Mo afin de pouvoir mettre tout le fichier
                        fichier.getline(Buffer2, 17Mo x 1024Ko x 1024 O);
                        return Buffer2;// attention à bien libérer Buffer2 : delete []
                 }

Ou mieux :

Code:

1
2
3
4
5
6
7
8
while ( fichier.getline(Buffer, 20)) // 20 est petit, car on ne cherche que des noms de fichiers donc 20 est assez grand et il ne lira pas les immenses paquets de données des contenus
{
                if (strcmp(Buffer, Fichier_cherche.c_str()) == 0)
                {
                        boost::shared_array <unsigned char>Buffer2(new unsigned char[17Mo x 1024Ko x 1024 O]); // 17Mo afin de pouvoir mettre tout le fichier
                        fichier.getline(*Buffer2, 17Mo x 1024Ko x 1024 O);
                        return Buffer2;// attention à bien libérer Buffer2 : delete []
                 }

[EDIT]: j'ai pas rajouté la gestion de l'échec de l'allocation. A faire pour avoir un code vraiment correct.

21/01/2009, 15h19
Invité4

ok, merci bien
21/01/2009, 15h39
Sylvain Togni

Citation:

Envoyé par Eldacar

Je cherche à extraire le contenu base64 d'un fichier en fonction de son nom, mais sans extraire chaque contenu à chaque fois, vu que c'est volumineux.

Si tu connais la taille des contenus tu peux les sauter avec la fonction seekg(), sinon pas possible il faut d'une manière ou d'une autre tout lire jusqu'au nom de fichier recherché.
21/01/2009, 15h46
3DArchi

Par contre, ce que ton code veut faire n'est pas cohérent avec ce que tu veux faire. Tu lis 17Mo à chaque fois? Tes fichiers sont de tailles fixes? Sinon, comment détermines-tu la fin de l'encodage en base64 (en particulier lorsqu'il n'y a pas de padding avec ==)?
22/01/2009, 15h13
Invité4

J'ai fini par résoudre mon problème différemment.
Comme vous me l'avez dit, j'ai vu que ça fonctionnait mal.
J'ai donc modifié le programme qui génère l'archive.
Il génère un fichier à côté qui contient l'emplacement et la taille de chaque sous fichier en base64 dans l'archive.
Ainsi, j'y vais avec seekg.

Merci bien