Comment importer données dans base en LATIN1

Bonjour à tous,

j'administre une base de données postgreSQL dont l'encodage est en Latin1.
J'aimerais importer des données en format CSV.
Mon problème est que mon import plante car ma base de données est encodée en Latin1.

le message d'erreur est le suivant:

Citation:

---

ERROR: invalid byte sequence for encoding "UTF8": 0xe92064
État SQL :22021
Astuce : This error can also happen if the byte sequence does not match the encoding expected by the server, which is controlled by "client_encoding".
Contexte : COPY perval_filtre, line 2

---

J'ai essayé d'encoder mon fichier en UFT8 mais ça ne marche pas:

Citation:

---

ERROR: character 0xefbbbf of encoding "UTF8" has no equivalent in "LATIN1"
État SQL :22P05
Contexte : COPY perval_filtre, line 1

---

J'ai lu que je pouvais changer l'encodage de ma base de données seulement ce n'est pas moi qui l'ai créée et j'ai quelques réticences à me lancer là dedans.
Je voudrais donc changer l'encodage de mes données en LATIN1, comment puis je faire?
J'utilise notepad ++ et Excel pour manipuler mes données.

Merci de vos réponses.

mat_elot

Citation:

---

Envoyé par mat_elot

J'ai essayé d'encoder mon fichier en UFT8 mais ça ne marche pas:

ERROR: character 0xefbbbf of encoding "UTF8" has no equivalent in "LATIN1"

---

Ces 3 octets sont un BOM (voir http://fr.wikipedia.org/wiki/Marque_...odages_unicode)
dûs au format de sauvegarde.

Dans les encodages proposés par Notepad++, il y a "Convertir en UTF-8 (sans BOM)", c'est celui-là qu'il faut choisir pour avoir un fichier UTF-8 utilisable directement par le COPY de postgresql.

Merci de ta réponse estofilo,

Citation:

---

Dans les encodages proposés par Notepad++, il y a "Convertir en UTF-8 (sans BOM)", c'est celui-là qu'il faut choisir pour avoir un fichier UTF-8 utilisable directement par le COPY de postgresql.

---

Je n'arrive pas à garder l'encodage en UTF-8 (sans BOM), quand je le converti alors qu'il est seulement en ANSI, que je ferme le fichier et que je le ré-ouvre, je ne le retrouve pas en UTF-8 (sans BOM).
Et en essayant de l'importer sans l'ouvrir, ca me met le même message d'erreur (1er cité).

Merci

Citation:

---

Je n'arrive pas à garder l'encodage en UTF-8 (sans BOM), quand je le converti alors qu'il est seulement en ANSI, que je ferme le fichier et que je le ré-ouvre, je ne le retrouve pas en UTF-8 (sans BOM).

---

Ca fonctionne pour moi. A partir d'un fichier ANSI:
1) Fichier>Ouvrir
2) aller dans le menu Encodage. normalement "Encoder en ANSI" est coché
3) Lancer Encodage>Convertir en UTF-8 (sans BOM)
4) sauver le fichier sous un nom différent Fichier>Enregistrer sous
5) Fichier>Fermer
6) Fichier>Ouvrir pour recharger le nouveau fichier
7) Aller dans Encodage. On doit voir "Encoder en UTF-8 (sans BOM)" qui est coché

Comme la détection automatique d'un encodage de caractères n'est pas fiable à 100%, il se peut que l'étape 7 ne soit pas OK, ce n'est pas grave.

Merci de ta réponse estofilo.

je n'y arrive toujours pas.
Je n'ai pas de menu encodage par contre avec ma version....du moins je ne la trouve pas.
J'ai un onglet "format", est bien cela dont tu parles?

Merci!

Essaye juste, sans passer par notepad++ ou autre éditeur de texte, de créer un script SQL dans lequel tu mettrais la commande "SET CLIENT_ENCODING TO 'LATIN1';" puis ensuite ta commande COPY
Puis exécute ton script SQL

Merci scheu!

Par contre je suis pas sur de comprendre ce qu'il faut que je fasse :aie:
J'ai testé de faire:

Code:

---

1 2	COPY ma_table_ref from 'chemin/ma_table_corresp.csv' WITH DELIMITER AS ';' CSV SET CLIENT_ENCODING from 'LATIN1';

---

puis

Code:

---

1 2	SET CLIENT_ENCODING from 'LATIN1'; COPY ma_table_ref from 'chemin/ma_table_corresp.csv' WITH DELIMITER AS ';' CSV ;

---

puis

Code:

---

1 2	SET CLIENT_ENCODING from 'LATIN1' COPY ma_table_ref from 'chemin/ma_table_corresp.csv' WITH DELIMITER AS ';' CSV ;

---

..tout dans la meme requete donc... mais apparemment ca n'est pas ca!
Du coup je me demande si j'ai bien saisi le sens du mot "script".

SET est une commande à part entière complètement indépendante de COPY.
En l'occurrence ici le conseil de scheu est de faire d'abord SET et ensuite COPY puisque l'objet du SET est d'influer sur la manière dont COPY va interpréter les données.
Un script est un ensemble de commandes regroupées dans un même fichier

Citation:

---

Envoyé par mat_elot

Merci de ta réponse estofilo.

je n'y arrive toujours pas.
Je n'ai pas de menu encodage par contre avec ma version....du moins je ne la trouve pas.
J'ai un onglet "format", est bien cela dont tu parles?

Merci!

---

Non c'est bien un menu Encodage. Copie d'écran en pièce jointe!
Notepad++ 5.6.7

Citation:

---

Envoyé par estofilo

Non c'est bien un menu Encodage. Copie d'écran en pièce jointe!
Notepad++ 5.6.7

---

je vais tenter avec une version plus récente que la mienne alors.

Citation:

---

Envoyé par estofilo

SET est une commande à part entière complètement indépendante de COPY.

---

Ce qui revient à ma seconde tentative.

Citation:

---

Envoyé par estofilo

En l'occurrence ici le conseil de scheu est de faire d'abord SET et ensuite COPY puisque l'objet du SET est d'influer sur la manière dont COPY va interpréter les données.
Un script est un ensemble de commandes regroupées dans un même fichier

---

Ce qui revient à ma première tentative.

Non?
Comment créer un script à part en lançant plusieurs requête sous pg admin?
Y a pas de question con je sais mais la je suis apparemment légèrement paumé :ccool:
Merci de votre aide!

J'ai testé avec notepad++ 5.6.8 et j'y suis arrivé sur un extrait de mon fichier.
Seulement quand j'essaie d'importer mon fichier en entier, il me bloque sur une ligne :cry:

Citation:

---

ERROR: character 0xcb86 of encoding "UTF8" has no equivalent in "LATIN1"
État SQL :22P05
Contexte : COPY perval_filtre, line 11942

---

Je vais à la ligne 11942 de mon fichier et ne trouve aucun caractère que je ne trouve dans les lignes précédentes de mon fichier.

Citation:

---

ERROR: character 0xcb86 of encoding "UTF8" has no equivalent in "LATIN1"
État SQL :22P05
Contexte : COPY perval_filtre, line 11942

---

C'est un accent circonflexe:
http://www.fileformat.info/info/unic...02c6/index.htm
qui est présent dans le jeu de caractères win-1252 mais pas en iso-latin1

Yeah!!! c'est good!
Je l'avais pas vu avec tous mes points virgules!
Merci pour le lien et pour tout le reste estofilo, ainsi qu'à toi scheu.

Pour conclure j'ai fait avec l'éditeur de texte, ca à tres bien marché du coup :ccool:
Merci pour ta méthode aussi scheu me manque plus qu'à poster une autre discussion.... cette fois sur les script!:mouarf:

Merci à vous!