Discussion :

[marqs]

Bonjour,
je suis en train de faire un programme qui doit vérifier que l'encodage des caractères est en utf-8.

Vérifier le BOM ne suffit pas, et je souhaiterai valider le fichier caractère par caractère avez vous une méthode ?

[tomlev]

C'est pas très évident, tu peux pas le faire en utilisant directement l'objet Encoding, il faut passer par le Decoder et sa propriété Fallback. J'ai fait une petite méthode d'extension qui permet de tester si le contenu est correct :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
public static class Extensions
{
    public static bool TryGetString(this Encoding encoding, byte[] bytes, out string result)
    {
        return encoding.TryGetString(bytes, 0, bytes.Length, out result);
    }
 
    public static bool TryGetString(this Encoding encoding, byte[] bytes, int index, int count, out string result)
    {
        result = null;
        var decoder = encoding.GetDecoder();
        decoder.Fallback = DecoderFallback.ExceptionFallback;
        try
        {
            int charCount = decoder.GetCharCount(bytes, index, count);
            char[] chars = new char[charCount];
            decoder.GetChars(bytes, index, count, chars, 0);
            result = new string(chars);
            return true;
        }
        catch(DecoderFallbackException)
        {
            return false;
        }
    }
}

Pour l'utiliser tu peux faire ça :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
byte[] bytes = File.ReadAllBytes(fileName);
string text;
if (Encoding.UTF8.TryGetString(bytes, out text))
{
    Console.WriteLine("L'encodage UTF8 du fichier est correct");
}
else
{
    Console.WriteLine("L'encodage UTF8 du fichier est incorrect");
}

Soit dit en passant, c'est pas génial de devoir catcher l'exception... idéalement il faudrait implémenter un DecoderFallback personnalisé, mais j'ai pas encore trouvé comment faire

[marqs]

Merci cela m'aide beaucoup.

[kheironn]

@Tomlev :
Ca gère BOM/pas BOM ?

[marqs]

D'après mes tests oui (passage du fichier en utf-8 bom et utf-8 depuis notepad++).

[tomlev]

@Tomlev :
Ca gère BOM/pas BOM ?

Je pense que ça marche avec ou sans BOM... à vérifier

[marqs]

Bonjour,

comment peut-on faire lorsque l'on lit un fichier ligne par ligne et utiliser la solution donnée en exemple car j'utilise de gros fichier et lorsque j'utilise readallbyte c'est très lourd.
Y-a-t-il un moyen de lire le fichier ligne par ligne et boucler ?

Merci.