UTF-8 et phpMyAdmin : problèmes d'encodage

Version imprimable

24/02/2006, 09h42
-DeN-

UTF-8 et phpMyAdmin : problèmes d'encodage

Suite à ce thread, j'ai décidé de passer à l'utf-8: http://www.developpez.net/forums/viewtopic.php?t=461471
Mais j'ai déjà un problème! Dans ma base de données, il y a des caractères "bizarres" pour les "é" (par exemple) il y a: Ã©

Pourtant:
interclassement: utf8_unicode_ci
Jeu de caractères pour MySQL: UTF-8 Unicode (utf8)
nterclassement pour la connection MySQL UTF-8 Unicode-ci

J'utilise phpMyAdmin, et l'encodage des caractères (firefox) est bien utf-8.

Merci pour votre aide!

EDIT: lorsque dans ma page php je fais un select, cela s'affiche correctement
EDIT2: phpmyadmin 2.6.0pl3
24/02/2006, 09h49
..:: Atchoum ::..

Salut,

Attention à la configuration de l'affichage de phpMyAdmin. Peut etre bien que tout est en UTF-8 mais que ton phpmyadmin l'affiche en ISO....

;)
24/02/2006, 09h54
-DeN-

et donc je fais comment pour insérer manuellement des données (depuis phpMyAdmin). Car en effet, si j'insère "é", le select de ma page php affiche un losange noir avec un "?" à l'intérieur.

Est-ce un fichier de config à modifier?

Merci pour cette aide au passage à utf-8 :D
24/02/2006, 09h55
Mr N.

Et ton flux html ?
24/02/2006, 09h59
-DeN-

Citation:

Envoyé par Mr N.

Et ton flux html ?

hem, tu veux parler de quoi :?:
Si c'est de l'option affichage->encodage des caractères (sous firefox) c'est bien en utf-8.

Et sinon j'ai bien mis le <meta http-equiv="Content-Type" content="text/html; charset=utf-8" />
24/02/2006, 10h40
-DeN-

Les caractères que j'appelais "bizarres" sont en fait les correspondants iso-8859-1 de l'utf-8.
phpMyAdmin ne veut pas me les afficher en utf-8! (et donc je ne peux pas insérer non plus via phpmyadmin)!
24/02/2006, 15h28
-DeN-

mmh, je trouve pas :cry: Malgré mes recherches sur le net, j'ai vu un type qui avait le même problème mais aucune réponse :(
24/02/2006, 16h03
zulkifli

regarde la source html de phpMyAdmin via Firefox et regarde si ya la bonne <meta> utf-8

sinon essaye un .htaccess avec AddDefaultCharset UTF-8 dans le repertoire de phpMyAdmin pour voir se que sa donne
24/02/2006, 16h24
-DeN-

1) C'est bien en utf-8
2) rien ne change

Merci pour ces propositions, mais je ne comprend pas du tout pourquoi phpmyadmin affiche cela. Est-ce que mes données ne sont pas VRIAMENT en utf-8?
24/02/2006, 16h51
zulkifli

As tu bien reseigné l'interclassement UTF-8 de ta base de donnée, de tes tables et de leur champs?
24/02/2006, 16h56
-DeN-

question: faut-il changer qqch quand on passe en utf-8 dans php.ini ou dans le fichier de config de phpmyadmin?
02/03/2006, 11h41
-DeN-

Désolé de remonter le sujet, mais je ne trouve pas de réponse.

Config:
- php5.04
- mysql 4.1.12
- phpMyAdmin 2.6.0-pl3
phpmyadmin:
- Language: Fr-UTF-8
- Jeu de caractères pour MySQL: UTF-8 Unicode (utf8)
- Interclassement pour la connection MySQL: UTF8_general_ci
- Interclassement de la BD: utf8_general_ci

Lorsque je me connecte je fais bien une query genre "set names utf-8", et en me connectant hors phpmyadmin j'ai pu bien voir que les caractères sont bien en utf8. (en lignes de commandes il s'affiche aussi Ã© pour un "é")

Le problème: sous phpMyAdmin les caractères sont affichés comme si c'était de l'iso => les é deviennent Ã© (donc on ne peut pas insérer non plus: dans ce cas il s'insère un "é" => dans ma page php j'ai un losange noir avec un "?")

Détails: mb_string n'est pas installé, aucun fichier de config modifié, le charset est utf-8 dans les <meta> myadmin. Pas de reboot.

Si qqn a la moindre idée, cela m'aiderait bcp!!! Merci!
04/07/2006, 18h32
SuperCed

J'ai exactement le même problème que toi.
As-tu trouvé une solution?
20/07/2006, 18h30
lodan

utf-8 suite

Je traine cette galère depuis un bon moment et de temps en temps je cherche la solution sur le net.

Cela semble venir de nul part et pourtant nous sommes nombreux dans ce cas.

Il est clair pour moi que je ne dois pas toucher aux paramètres par défaut de Firefox, puisque l'utilisateur visitant un site ne doit modifier ses paramètres.

Il y a sur firefox dans "Affichage" "Encodage des caractères" "Détection automatique" (Désactivé).

Celui là j'aimerai bien l'activer pour voir, mais je ne trouve pas comment.

J'utilise Golive CS2 pour créer mes pages, elles doivent être en encodage utf-8 ?

Ma base mysql sous phpmyadmin est en utf-8 idem pour les tables et les champs.

Je ne vois rien d'autre

Ok, c'est bon, j'ai la solution.

J'ai ajouté 2 lignes dans les fichiers dbi contenus dans le répertoire librairies/dbi/

Voici les lignes pour chaque fichier :
dans mysql.dbi.lib.php

Code:

1
2
3
 
mysql_query("SET SESSION CHARACTER_SET_RESULTS =latin1;",$link);
    mysql_query("SET SESSION CHARACTER_SET_CLIENT =latin1;",$link);

Après PMA_DBI_postConnect($link, $is_controluser);
et avant return $link;
Dans la fonction PMA_DBI_connect

Au même endroit, dans le fichier mysqli.dbi.lib.php :

Code:

1
2
3
 
mysqli_query($link, "SET SESSION CHARACTER_SET_RESULTS =latin1;");
mysqli_query($link, "SET SESSION CHARACTER_SET_CLIENT =latin1;");

Il s'agit en fait d'éviter au client mysql de faire une double conversion vers l'utf-8.

Voici le code complet des deux pages maintenant pour la fonction à modifier :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
 
function PMA_DBI_connect($user, $password, $is_controluser = FALSE) {
    global $cfg, $php_errormsg;
 
    $server_port   = (empty($cfg['Server']['port']))
                   ? ''
                   : ':' . $cfg['Server']['port'];
 
    if (strtolower($cfg['Server']['connect_type']) == 'tcp') {
        $cfg['Server']['socket'] = '';
    }
 
    $server_socket = (empty($cfg['Server']['socket']))
                   ? ''
                   : ':' . $cfg['Server']['socket'];
 
    if (PMA_PHP_INT_VERSION >= 40300 && PMA_MYSQL_CLIENT_API >= 32349) {
        $client_flags = $cfg['Server']['compress'] && defined('MYSQL_CLIENT_COMPRESS') ? MYSQL_CLIENT_COMPRESS : 0;
        // always use CLIENT_LOCAL_FILES as defined in mysql_com.h
        // for the case where the client library was not compiled
        // with --enable-local-infile
        $client_flags |= 128;
    }
 
    if (empty($client_flags)) {
        $connect_func = 'mysql_' . ($cfg['PersistentConnections'] ? 'p' : '') . 'connect';
        $link = @$connect_func($cfg['Server']['host'] . $server_port . $server_socket, $user, $password);
    } else {
        if ($cfg['PersistentConnections']) {
            $link = @mysql_pconnect($cfg['Server']['host'] . $server_port . $server_socket, $user, $password, $client_flags);
        } else {
            $link = @mysql_connect($cfg['Server']['host'] . $server_port . $server_socket, $user, $password, FALSE, $client_flags);
        }
    }
 
    if (empty($link)) {
        PMA_auth_fails();
    } // end if
 
    PMA_DBI_postConnect($link, $is_controluser);
 
    mysql_query("SET SESSION CHARACTER_SET_RESULTS =latin1;",$link);
    mysql_query("SET SESSION CHARACTER_SET_CLIENT =latin1;",$link);
    return $link;
}

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
 
function PMA_DBI_connect($user, $password, $is_controluser = FALSE)
{
    global $cfg, $php_errormsg;
 
    $server_port   = (empty($cfg['Server']['port']))
                   ? FALSE
                   : (int) $cfg['Server']['port'];
 
    if (strtolower($cfg['Server']['connect_type']) == 'tcp') {
        $cfg['Server']['socket'] = '';
    }
 
    // NULL enables connection to the default socket
    $server_socket = (empty($cfg['Server']['socket']))
                   ? null
                   : $cfg['Server']['socket'];
 
    $link = mysqli_init();
 
    mysqli_options($link, MYSQLI_OPT_LOCAL_INFILE, TRUE);
 
    $client_flags = $cfg['Server']['compress'] && defined('MYSQLI_CLIENT_COMPRESS') ? MYSQLI_CLIENT_COMPRESS : 0;
 
    $return_value = @mysqli_real_connect($link, $cfg['Server']['host'], $user, $password, FALSE, $server_port, $server_socket, $client_flags);
 
    if ($return_value == FALSE) {
        PMA_auth_fails();
    } // end if
 
    PMA_DBI_postConnect($link, $is_controluser);
    mysqli_query($link, "SET SESSION CHARACTER_SET_RESULTS =latin1;");
    mysqli_query($link, "SET SESSION CHARACTER_SET_CLIENT =latin1;");
    return $link;
}

08/10/2007, 23h37
Xargos

Etant donné qu'on trouve cette solution en cherchant un peu, je préfère préciser ici que ce n'est pas du tout ce qu'il faut faire.

Pour se connecter à une base en utf-8 sur mysql en utilisant PHP, il faut préciser après le mysql_connect :

Code:

mysql_query("SET NAMES 'UTF8'")

Dans de nombreux frameworks PHP, il est possible de configurer sa connection à la base. Avec cakephp par exemple, il faut ajouter dans la configuration de base de données :

Code:

'encoding' => 'utf8'

Ainsi, les données affichées par phpmyadmin et les requêtes PHP seront les mêmes.
26/09/2008, 09h37
nicolas.poulain

Citation:

Envoyé par Xargos

Etant donné qu'on trouve cette solution en cherchant un peu, je préfère préciser ici que ce n'est pas du tout ce qu'il faut faire.

Pour se connecter à une base en utf-8 sur mysql en utilisant PHP, il faut préciser après le mysql_connect :

Code:

mysql_query("SET NAMES 'UTF8'")

J'ai déjà ça en place.
Même mon SET NAMES est redondant par rapport à la config de MySql. Le problème reste le même :
- tout en utf8 dans les pages accès, enregistrement, modification via php
- tout en utf8 dans Mysql
Aucun pb

Dès qu'on affiche dans PMA, ça ressemble à de l'iso affiché en utf8

la solution énoncée dans le post précédent le tien ne me paraît pas "super" parce que ça demande de patcher, mais elle a le mérite de résoudre le souci.
Même si je pense fortement que le souci est en amont avec un truc oublié dans un coin :\

Nico
26/09/2008, 21h35
nicolas.poulain

Résolu : Ok pour moi

Bonjour

Pour moi résolu avec :
mysql_query("SET NAMES 'utf8'") ;

Je l'avais mis après le return de ma fonction de connexion à la base :(
Les plus gros problèmes sont entre la chaise et le clavier... m'en bat la culpe ici publiquement :\

Du coup, ça fonctionne bien quelque soit le mode de connexion à la base : PMA, mon appli, en console directos via mysql :lol:

Glané dans les recherches :
http://wiki.cihar.com/pma/garbled_data
et
http://fr.php.net/manual/fr/function...et-charset.php

Nico

Utf-8 carractere arabe

Citation:

Envoyé par SuperCed

Ok, c'est bon, j'ai la solution.

J'ai ajouté 2 lignes dans les fichiers dbi contenus dans le répertoire librairies/dbi/

Voici les lignes pour chaque fichier :
dans mysql.dbi.lib.php

Code:

1
2
3
 
mysql_query("SET SESSION CHARACTER_SET_RESULTS =latin1;",$link);
    mysql_query("SET SESSION CHARACTER_SET_CLIENT =latin1;",$link);

Après PMA_DBI_postConnect($link, $is_controluser);
et avant return $link;
Dans la fonction PMA_DBI_connect

Au même endroit, dans le fichier mysqli.dbi.lib.php :

Code:

1
2
3
 
mysqli_query($link, "SET SESSION CHARACTER_SET_RESULTS =latin1;");
mysqli_query($link, "SET SESSION CHARACTER_SET_CLIENT =latin1;");

Il s'agit en fait d'éviter au client mysql de faire une double conversion vers l'utf-8.

Voici le code complet des deux pages maintenant pour la fonction à modifier :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
 
function PMA_DBI_connect($user, $password, $is_controluser = FALSE) {
    global $cfg, $php_errormsg;
 
    $server_port   = (empty($cfg['Server']['port']))
                   ? ''
                   : ':' . $cfg['Server']['port'];
 
    if (strtolower($cfg['Server']['connect_type']) == 'tcp') {
        $cfg['Server']['socket'] = '';
    }
 
    $server_socket = (empty($cfg['Server']['socket']))
                   ? ''
                   : ':' . $cfg['Server']['socket'];
 
    if (PMA_PHP_INT_VERSION >= 40300 && PMA_MYSQL_CLIENT_API >= 32349) {
        $client_flags = $cfg['Server']['compress'] && defined('MYSQL_CLIENT_COMPRESS') ? MYSQL_CLIENT_COMPRESS : 0;
        // always use CLIENT_LOCAL_FILES as defined in mysql_com.h
        // for the case where the client library was not compiled
        // with --enable-local-infile
        $client_flags |= 128;
    }
 
    if (empty($client_flags)) {
        $connect_func = 'mysql_' . ($cfg['PersistentConnections'] ? 'p' : '') . 'connect';
        $link = @$connect_func($cfg['Server']['host'] . $server_port . $server_socket, $user, $password);
    } else {
        if ($cfg['PersistentConnections']) {
            $link = @mysql_pconnect($cfg['Server']['host'] . $server_port . $server_socket, $user, $password, $client_flags);
        } else {
            $link = @mysql_connect($cfg['Server']['host'] . $server_port . $server_socket, $user, $password, FALSE, $client_flags);
        }
    }
 
    if (empty($link)) {
        PMA_auth_fails();
    } // end if
 
    PMA_DBI_postConnect($link, $is_controluser);
 
    mysql_query("SET SESSION CHARACTER_SET_RESULTS =latin1;",$link);
    mysql_query("SET SESSION CHARACTER_SET_CLIENT =latin1;",$link);
    return $link;
}

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
 
function PMA_DBI_connect($user, $password, $is_controluser = FALSE)
{
    global $cfg, $php_errormsg;
 
    $server_port   = (empty($cfg['Server']['port']))
                   ? FALSE
                   : (int) $cfg['Server']['port'];
 
    if (strtolower($cfg['Server']['connect_type']) == 'tcp') {
        $cfg['Server']['socket'] = '';
    }
 
    // NULL enables connection to the default socket
    $server_socket = (empty($cfg['Server']['socket']))
                   ? null
                   : $cfg['Server']['socket'];
 
    $link = mysqli_init();
 
    mysqli_options($link, MYSQLI_OPT_LOCAL_INFILE, TRUE);
 
    $client_flags = $cfg['Server']['compress'] && defined('MYSQLI_CLIENT_COMPRESS') ? MYSQLI_CLIENT_COMPRESS : 0;
 
    $return_value = @mysqli_real_connect($link, $cfg['Server']['host'], $user, $password, FALSE, $server_port, $server_socket, $client_flags);
 
    if ($return_value == FALSE) {
        PMA_auth_fails();
    } // end if
 
    PMA_DBI_postConnect($link, $is_controluser);
    mysqli_query($link, "SET SESSION CHARACTER_SET_RESULTS =latin1;");
    mysqli_query($link, "SET SESSION CHARACTER_SET_CLIENT =latin1;");
    return $link;
}

Bonjour
j'ai le meme probleme mais avec les carracteres arabes.
quand jesaisiun nom arabe il m'affiche l'erreur suivante"data too long for nom" nom c'est le nom du chap
SVP aidez moi

02/12/2008, 15h55
SuperCed

Citation:

Envoyé par Amel_B

Bonjour
j'ai le meme probleme mais avec les carracteres arabes.
quand jesaisiun nom arabe il m'affiche l'erreur suivante"data too long for nom" nom c'est le nom du chap
SVP aidez moi

Il s'agit peut être de changer latin 1 par le nom de l'encodage utilisé pour afficher des caractères arabes.

Il faut aussi faire attention, je pense que les caractères arabes peuvent être sur 4 octets. Il faut donc bien faire des tests multioctets quand on teste la longueur des châines.
03/12/2008, 08h44
Amel_B

Citation:

Envoyé par SuperCed

Il s'agit peut être de changer latin 1 par le nom de l'encodage utilisé pour afficher des caractères arabes.

Il faut aussi faire attention, je pense que les caractères arabes peuvent être sur 4 octets. Il faut donc bien faire des tests multioctets quand on teste la longueur des châines.

j'ai mis set names 'utf-8' mais toujours le même problème.

comment faire ce que tu as dis 'Il faut donc bien faire des tests multioctets quand on teste la longueur des chaînes'
03/12/2008, 08h47
Amel_B

jai essayé ds un autre pc la ou installé mysql3 ça marche mais sur mon pc ou est installé mysql5 ça marche pas
03/12/2008, 09h04
SuperCed

Citation:

Envoyé par Amel_B

j'ai mis set names 'utf-8' mais tjrs le meme prob.

comment faire ce ke tu as dis 'Il faut donc bien faire des tests multioctets quand on teste la longueur des châines'

Un mot arabe que tu vois sur 4 caractères peut en fait être codé sur 4*4 octets.
donc 16 octets.

Dans MySQL, le nom sur 4 caractères ne rentrera donc pas si tu as un champ CHAR(4) par exemple.

Il te faudra un CHAR(16).

En ce qui concerne l'encvodage, ce n'est justement pas l'encodage UTF-8 qu'il faut mettre, mais l'encodage utilisé par défaut pour tes lettres en arabe.

J'ai vu que ça existait, par exemple, il y a l'arabe ISO 8859-6, l'arabe DOS, l'arabe MacOS et l'arabe Windows.
A toi de trouver la correspondance dans la doc MySQL.
Peut-être ça cp1256
03/12/2008, 09h27
Amel_B

Citation:

Envoyé par SuperCed

Un mot arabe que tu vois sur 4 caractères peut en fait être codé sur 4*4 octets.
donc 16 octets.

Dans MySQL, le nom sur 4 caractères ne rentrera donc pas si tu as un champ CHAR(4) par exemple.

Il te faudra un CHAR(16).

En ce qui concerne l'encvodage, ce n'est justement pas l'encodage UTF-8 qu'il faut mettre, mais l'encodage utilisé par défaut pour tes lettres en arabe.

J'ai vu que ça existait, par exemple, il y a l'arabe ISO 8859-6, l'arabe DOS, l'arabe MacOS et l'arabe Windows.
A toi de trouver la correspondance dans la doc MySQL.
Peut-être ça cp1256

la longueur je l'ai mis 255 pour éviter ça
pour cp1256 je le met dans php myadmin, et dans le fichier php alors qu'est ce que j'écris au lieu de charset=utf-8 ?
03/12/2008, 09h35
rinuom99

dans le fichier php essayé avec windows-1256 au lieu de utf-8 et dans php myadmin cp1256_general_ci
03/12/2008, 09h58
Amel_B

je les ai changé et le même message d'erreur d'hier seulement maintenant

اسبانياIllegal mix of collations (cp1256_general_ci,IMPLICIT) and (utf8_general_ci,COERCIBLE) for operation '='j'ai fait echo

maintenant quand j'ai fait echo $nom_wil il me l'a affiché en arabe "اسبانيا"
avant le changement il affiche des carrés
17/04/2009, 13h37
Korri
Citation:
Envoyé par SuperCed

Ok, c'est bon, j'ai la solution.

J'ai ajouté 2 lignes dans les fichiers dbi contenus dans le répertoire librairies/dbi/

Voici les lignes pour chaque fichier :
dans mysql.dbi.lib.php

Code:

1 2 3 mysql_query("SET SESSION CHARACTER_SET_RESULTS =latin1;",$link); mysql_query("SET SESSION CHARACTER_SET_CLIENT =latin1;",$link);

[...] (écourté pour pas poluer) [...]
Merci beaucoup, j'ai ajouté ces ligne et YOUPII ça MARCHE !!

Merci pour cette astuce depuis le temps que je me disait que phpMyAdmin fesait ***** a pas vouloir faire du vrai utf-8 !

Encore merci !
23/07/2012, 14h13
SuperCed

Pour info, depuis, j'ai trouvé la cause de ce problème avec phpMyAdmin.

Il s'agit d'un double encodage en UTF-8. Je m'explique :

MySQL stocke en utf-8
On lui envoie des données en UTF-8 depuis PHP

Il y a donc un double encodage.
23/07/2012, 16h04
Beerbelott

Joli déterrage !
3 ans & 3 mois après... Pour donner une explication déjà répétée maintes fois autour du Web depuis.

Magnifique.
29/05/2016, 11h27
brahmi_s

l'ajout des deux ligne n'a pas réussi

Bonjour;

J'ai ajouté les deux lignes comme indiqué, mais le problème n'est pas encore résolu.
Quand je redémarre mysql, il m'affiche un message:

ERROR 1300 (HY000) at line 1: Invalid utf8 character string: 'M\xE9d\xE9a'
ERROR 1300 (HY000) at line 1: Invalid utf8 character string: 'M\xE9d\xE9a'
ERROR 1300 (HY000) at line 1: Invalid utf8 character string: 'M\xE9d\xE9a'
ERROR 1300 (HY000) at line 1: Invalid utf8 character string: 'M\xE9d\xE9a'
ERROR 1300 (HY000) at line 1: Invalid utf8 character string: 'M\xE9d\xE9a'
ERROR 1300 (HY000) at line 1: Invalid utf8 character string: 'M\xE9d\xE9a'
ERROR 1300 (HY000) at line 1: Invalid utf8 character string: 'M\xE9d\xE9a'
ERROR 1300 (HY000) at line 1: Invalid utf8 character string: 'M\xE9d\xE9a'