Problème Streamreader accents

Version imprimable

Bonjour à tous !

J'ai un petit bout de code qui me permet de récupérer le contenu d'un fichier csv que voilà :
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 public static List<string[]> ExtractFile(string csvFile) { List<string[]> result = new List<string[]>(); StreamReader streamReader = new StreamReader(csvFile, Encoding.UTF8,); while (streamReader.Peek() != -1) { result.Add(streamReader.ReadLine().Split(';')); } return result; }
Mon souci est que certains champs possèdent des accents de ce genre : Bartók Béla. Dans la liste de tableaux de string retournée par cette fonction, les accents sont remplacés par le symbole rectangulaire bien connu de ceux qui ont déjà goûté aux problèmes d'encodage.

J'ai essayé de donné un encoding en UTF-7 8 32 UNICODE, bref tous les encodages que l'on peut mettre en paramètre au Streamreader, rien.

Quelqu'un aurait-il une idée ?

Merci d'avance pour toutes les réponses !

04/04/2011, 16h43
tomlev

Je soupçonne que le problème n'est pas au niveau de la lecture du fichier mais plutôt au niveau de ce que tu fais des chaines ensuite... Tu as essayé de déboguer en pas à pas pour voir si les lignes lues dans le fichier sont correctes ? A quel niveau tu observes que les accents sont mal interprétés ? A l'affichage ?

Si tu peux, poste un des fichiers qui posent problème

Plop, c'est peut être que l'encoding utilisé lors de l'initialisation de ton StreamReader ne correspond pas à celui de ton fichier, tu peux essayer :

Code:

1
2
3
 
Encoding encode = GetEncoding(opendia.FileName);
TextReader read = new StreamReader(opendia.FileName, encode);

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
 
private Encoding GetEncoding(string CheminFichier)
 {
     Encoding enc = null;
     FileStream file = new FileStream(CheminFichier, FileMode.Open, FileAccess.Read, FileShare.Read);
     if (file.CanSeek)
     {
         byte[] bom = new byte[4]; // Get the byte-order mark, if there is one
         file.Read(bom, 0, 4);
         if (bom[0] == 0xef && bom[1] == 0xbb && bom[2] == 0xbf) // utf-8
         {
            enc = Encoding.UTF8;
         }
         else if ((bom[0] == 0xff && bom[1] == 0xfe) || // ucs-2le, ucs-4le, and ucs-16le
         (bom[0] == 0 && bom[1] == 0 && bom[2] == 0xfe && bom[3] == 0xff)) // ucs-4
         {
            enc = Encoding.Unicode;
         }
         else if (bom[0] == 0xfe && bom[1] == 0xff) // utf-16 and ucs-2
         {
            enc = Encoding.BigEndianUnicode;
         }
         else // ANSI, Default
         {
            enc = Encoding.Default;
         }
         // Now reposition the file cursor back to the start of the file
         file.Seek(0, SeekOrigin.Begin);
     }
     else
     {
     // The file cannot be randomly accessed, so you need to decide what to set the default to
     // based on the data provided. If you're expecting data from a lot of older applications,
     // default your encoding to Encoding.ASCII. If you're expecting data from a lot of newer
     // applications, default your encoding to Encoding.Unicode. Also, since binary files are
     // single byte-based, so you will want to use Encoding.ASCII, even though you'll probably
     // never need to use the encoding then since the Encoding classes are really meant to get
     // strings from the byte array that is the file.
 
     enc = Encoding.Default;
     }
     file.Close();
     return enc;
 }

04/04/2011, 18h19
tomlev

A priori StreamReader fait déjà quelque chose comme ça pour détecter l'encodage s'il n'est pas spécifié...

Mais de toutes façons cette technique n'est pas infaillible : le BOM n'est pas obligatoire, du moins en UTF-8...
04/04/2011, 18h24
Aeronia

Citation:

Envoyé par tomlev

A priori StreamReader fait déjà quelque chose comme ça pour détecter l'encodage s'il n'est pas spécifié...

Pas toujours, j'ai déjà été obligé d'utiliser cette fonction aussi non les caractères étaient mal interprétés :/
05/04/2011, 01h36
Graffito

Essaye avec

Code:

new StreamReader(csvFile, Encoding.GetEncoding("iso-8859-1");

ou

Code:

new StreamReader(csvFile, Encoding.GetEncoding(1252);
05/04/2011, 02h14
tomlev

Citation:

Envoyé par Graffito

Essaye avec

Code:

new StreamReader(csvFile, Encoding.GetEncoding("iso-8859-1");

ou

Code:

new StreamReader(csvFile, Encoding.GetEncoding(1252);

Dans ce cas autant prendre Encoding.Default, ça revient au même et c'est plus simple...
05/04/2011, 02h20
Graffito

Citation:

Dans ce cas autant prendre Encoding.Default, ça revient au même et c'est plus simple...

Encoding.Default est l'encodage des page de code ANSI par défaut du PC .

Sur une machine, cela peut coorrespondre à ISO-8859-1 ou 1252, mais pas sur une autre ...
08/04/2011, 10h39
Z4ng3tsu

Citation:

Envoyé par Graffito

Essaye avec

Code:

new StreamReader(csvFile, Encoding.GetEncoding("iso-8859-1");

ou

Code:

new StreamReader(csvFile, Encoding.GetEncoding(1252);

Merci beaucoup pour ce bout de code qui a résolu mon problème !
Je ne récupèrai pas du tout les accents mais maintenant c'est bon !

Merci à tous !