Discussion :

[bak47]

bonjour, j'ai trouvé plusieurs post traitant du sujet mais je n'ai pas réussit à avoir une réponse à ma question.

voila ma situation: je dispose d'un fichier texte (pour le moment, je travail uniquement sur du latin1 mais à terme mon prog doit être capable de supporté plusieurs autres encodage dont l'UTF-8) contenant toute une liste de mots donc certain sont accentué.

la première étape de mon programme consiste a récupérer les chaines de caractères contenuent dans mon fichier

Problème : quand il y a des accent, ils sont remplacés par un magnifique � qui me bloque totalement car j'ai besoin des accents pour les traitements ultérieurs

si vous avez des solution, je suis prneur. j'ai esseyé avec getLine et fgetc et le résultat est le même.

je travail sous différent linux et avec g++ comme compilateur

[Jean-Marc.Bourguet]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
#include <locale>
 
int main()
{
   std::locale::global(std::locale(""));
   ...
}

Et il faut indiquer correctement la locale a utiliser (variables d'environnement LC_xxx).

Il vaut mieux utiliser des wchar_t, wstring, wiostream etc si ton programme doit fonctionner avec des locales UTF-8.

Si tu dois faire fonctionner ton programme avec tes fichiers qui sont dans un autre charset que ton terminal, ca devient en toute rigueur beaucoup plus delicat. Mais sous Linux ca devrait passer simplement en imbuant (membre imbue des iostreams) des locales adequates dans les fichiers (sous Linux wchar_t devrait toujours etre de l'Unicode en UCS-32 dans toutes les locales, mais ce n'est pas garanti par la norme C++).

[nicroman]

Problème : quand il y a des accent, ils sont remplacés par un magnifique � qui me bloque totalement car j'ai besoin des accents pour les traitements ultérieurs

Déjà, ça, ça me gène.... un caractère accentué n'est *jamais* remplacé par � à la lecture...
Le fichier (ou une 'chaine de caractères') n'est qu'une suite d'octets... Qui sont affiché par un programme comme un caractère accentué, et par un autre programme (par exemple le debugueur) comme un �

Il faut donc spécifier à l'affichage, comment gérer ces données.

Un fichier texte ne contient pas d'information d'encodage par défaut... Les fichiers XML oui, les fichier HTML non (l'encodage est fourni dans les headers du serveur). Il faudra donc laisser le soin à l'utilisateur de choisir l'encodage idéal (rien que pour choisir entre les ISO-8859 c'est pas facile ! ).
Ensuite, la lecture n'est pas à refaire, elle ne change rien à la donnée (une suite d'octets), c'est uniquement la manière dont on l'interprete qui change.

La locale n'y change pas grand chose hélas.... rien n'interdit de lire un fichier UTF-8 avec une locale qui utilise l'ISO-8859-1

[bak47]

désolé de mon delais de réponse, j'ai été coupé du net pendant quelques jours.

tout d'abbord, merci d'avoir prit le temps de me répondre.

Déjà, ça, ça me gène.... un caractère accentué n'est *jamais* remplacé par � à la lecture...

effectivement, à la lecture il n'y a pas de soucis, si je récupère mon texte et que je fait ensuite un test tel que

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

if(line[i]=='ê'){cout << "ok"<< endl;}

aucun probleme, le teste passe bien.

par contre si je fait un simple

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

cout << line << endl;

ca m'affiche le �. Si quelqu'un voit une solution à c eproblème, je suis preneur.

[3DArchi]

Comme dit plus haut :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
 
#include <locale>
 
int main()
{
   std::locale::global(std::locale(""));
   ...
}

[bak47]

peut tu m'éclairé sur le fonctionnement des locale?

j'ai fait ca :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
 
locale::global(locale(""));
 
char* fichier=argv[1];
FILE* fp = fopen(fichier, "r");	
ifstream ifs(fichier);
string line;
getline(ifs,line);
cout << line << endl;

avec dans mon fichier :

tê tà tï ça tu

et le résultat reste le même :

t� t� t� �a tu

[Jean-Marc.Bourguet]

Bizarre. Est-ce que tu peux donner
1/ ton programme de test complet
2/ le resultat de la commande
locale
dans le terminal ou tu lances ton programme
3/ le resultat de la commande
od -t x1 fichier
avec fichier qui est le fichier source
4/ le resultat de
prog fichier | od -t x1

[3DArchi]

Tu es sous gcc ?
Essais:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
 
mon_prog.exe > out.txt