nouvel épisode des mystères de l'encodage

bonjour ,j'ai un probleme d' encodage dans un script qui injecte des données d'un fichier xl vers une base de données postgres.
les caractères accentués sont transformés (ex élevée ==> \xe9lev\xe9e)
cet import se fait au départ par une tranformation du fichier xl en fichier texte .ce fichier texte est correct.
quand je lis ce fichier sous python c'est ok

Code:

---

1 2 3 4 5

... ligne=fichier.readline() print ligne ...

---

mais quand quand je transforme cette ligne en liste (pour recuperer mes valeurs séparément): problème les caractères accentués sont transformés

Code:

---

1 2 3 4 5

... liste=ligne.rstrip().split(';') print liste ...

---

je suis sous python 2.6 , windows XP (sous python 2.5 windows 2000 ou xp pas de probleme)
PS: j'ai testé (et détesté) des "encode" ou "decode" un peu de partout avec divers encodages , changer le codage de ma base de données(utf8,win1252)
rien y fait... le bonheur!

Bonjour,

Il y a 2 pb différents à considérer:

- la conversion

- l'affichage

Pour la conversion:

Par exemple, si la chaine x codé cp1252 doit être convertie en code utf-8:

Code:

---

y = x.decode('cp1252').encode('utf-8')

---

Pour l'affichage:

La console d'affichage a un encodage qui peut être connu par: sys.stdout.encoding. L'affichage de la chaine y précédente encodée utf-8 est correctement affichée par:

Code:

---

1 2 3

z = y.decode('utf-8').encode(sys.stdout.encoding) print z

---

Mais ça ne suffit pas: même si z a le bon encodage, celui de la console d'affichage, l'affichage de z dans une liste ne se passe pas bien. Par exemple:

Code:

---

1 2 3 4

z = "abcéèçàù" print z, [z] abcéèçàù ['abc\xe9\xe8\xe7\xe0\xf9']

---

Pour éviter cela, il suffit d'afficher une telle liste dans une boucle. Par exemple pour une liste L composées de chaines encodée pour la console d'affichage:

Code:

---

1 2 3 4 5 6 7 8 9

def printliste(L): ch = '[' for e in L: ch += e + ', ' ch = ch[:-2] + ']' print ch   printliste([a, b, c])

---

Et là, l'affichage est correct.

Tyrtamos

bonjour,
merci Tyrtamos, j'étais sûr que tu allais me répondre...
je construirais ma requête avec une boucle for

ce qui est bizarre c'est que j'utilisais ce script depuis 2 ans et je n'ai jamais eu de problème. je vais quand même vérifier que depuis 2 ans je n'ai jamais injecté de caractères accentués (ce qui m'étonnerais fortement). je te tiendrais au courant.

bon we