Discussion :

[william wallace]

Bonjour tout le monde,

Je me décide à poster car je n'arrive pas à trouver une réponse à mon problème malgré le fait que cela fait plusieurs jours que je recherche une solution. Et bien sur il faut absolument que j'arrive à résoudre ce problème (sinon je ne serais pas la ^^)
Je travaille sous Qt creator 2.4.1 basé sur QT 4.7.4 (sous win 7), pour lire dans une base de données SQL (en 2008 R2). La base de données est celle de notre gestion commerciale "sage 100". Je travaille qu'en lecture sur cette bdd, aucune insertion. Utilisation du driver SQL Native Client 10.0 pour le DSN.

Mon problème est lorsque je fais un 'select', le résultat retourné m'affiche des caractères '?' au lieu des caractères spéciaux 'éèî' etc. Tous les autres caractères s'affichent correctement. Les caractères qui posent problème sont ceux faisant partis de caractères étendus ASCII (cf: http://www.asciitable.com/ )

Voici une partie du code utilisé dans ma classe:

dans le .h mes variables:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
QSqlQuery *maQuery ;
 QString reponseReq ;
 QSqlDatabase maDb ;

dans le cpp, ma fonction de connection à ma base:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
 
maDb = QSqlDatabase::addDatabase("QODBC");
 qDebug() << maDb.isValid();
 maDb.setHostName("serveur3");
 maDb.setDatabaseName("gecotesttt");
 maDb.setUserName("admin");
 maDb.setPassword("XXX");
 maQuery = new QSqlQuery ;

toujours ds le cpp, ma fonction d'execution de la requête (le select est allégé ici)

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
 
maQuery->prepare("SELECT F_DOCENTETE.DO_Piece,  F_LIVRAISON.LI_Adresse, F_LIVRAISON.LI_Telephone, F_COMPTET.CT_EMail, F_DOCENTETE.DO_Type FROM F_DOCENTETE FULL OUTER JOIN F_LIVRAISON ON F_DOCENTETE.LI_No = F_LIVRAISON.LI_No FULL OUTER JOIN F_COMPTET ON F_LIVRAISON.CT_Num = F_COMPTET.CT_Num WHERE F_DOCENTETE.DO_Piece = :premierevaleur AND F_DOCENTETE.DO_Type = :deuxiemevaleur") ;
 
 
  maQuery->bindValue(":premierevaleur", numDoc);
  maQuery->bindValue(":deuxiemevaleur", choixTypeDocument);
 
 
   ...
 
             while(maQuery->next())
              {
 
                  for(int x=0; x < maQuery->record().count(); ++x)
                  {
                      reponseReq = maQuery->value(x).toString();
                      qDebug() << "Dans CBaseDeDonnées.cpp" << reponseReq ;
                  }                     
       ...
 
     }

Ce que j'ai déja tenté:
- J'ai modifié l'encodage de mes pages de code en choisisant "UTF-8".

- J'ai bien inscrit ces 3 lignes dans le main:
QTextCodec::setCodecForCStrings(QTextCodec::codecForName("UTF-8"));
QTextCodec::setCodecForTr(QTextCodec::codecForName("UTF-8"));
QTextCodec::setCodecForLocale(QTextCodec::codecForName("UTF-8"));

- J'ai recherché à définir une option pour la connection à ma base en définissant l'encodage de ma base mais je n'ai rien trouvé.

- de transformer le resultat de ma variable QSqlQuery (mais à chaque fois des erreurs de compilations apparaissent...)

- j'ai essayé d'utiliser la fonction "COLLATE" dans ma requete, mais le resultat obtenu ne corrige pas mon probleme. (COLLATE Latin1_General_BIN ou autre)


Autre remarque:
- je ne peux pas modifier directement l'encodage de ma base de données puisqu'elle est créée et remplie par un logiciel tiers. D'après ce que j'ai trouvé elle est en ISO-8859-1. Avec classement FRENCH_CI_AS
- Les données dans ma base de données sont bien encodées puisque si j'y accède par access excel ou autres, mes accents apparaissent correctement...
- suivant l'encodage, en mode debug, mes accents apparaissent soient en '?' ou alors en '177775'.

Merci de m'avoir lu. Toutes propositions / idées / questions sera accepté avec grand plaisir car la je ne sais plus du tout quoi faire...
merci de vos réponses !

[Amnell]

Bonsoir,

Avez-vous essayé ceci :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

reponseReq = QString::fromLatin1(qPrintable(maQuery->value(x).toString()));

Dans le sens où votre fichier attend de l'UTF8 pour que l'encodage soit correct et que la BDD retourne de l'ISO, j'aurais tendance à partir là-dessus.

Pour les erreurs de compilation, il doit y avoir moyen d'arranger ça, si les idées associées vous semblent justifiées. Si c'est le cas, je vous invite à détailler ces éléments.

Vérifiez également si l'encodage est réellement de l'ISO-8859-1 et pas de l'ISO-8859-15, par exemple.

Bonne continuation,
Amnell.

[william wallace]

Tout d'abord un grand merci pour vous intéresser a mon problème car, il faut le dire, je suis dépassé ! Mais j'apprends !! ^^

Ensuite j'ai essayé d'insérer la fonction fromString comme proposé mais le résultat est que je n'ai plus des '?' mais des '�'. Donc ma base est peut etre en iso-8859-15. J'ai demandé à mon prestataire qui nous vend ce logiciel et ils ne veulent pas me donner l'encodage de la base ! du coup je ne peux faire que des suppositions...

Pour mes erreurs de compilation, vous m'avez deja donné une réponse car j'avais essayé d'utiliser la fonction proposée (fromlatin1) mais je n'utilisais pas 'qprintable', donc forcement ca ne pouvait pas se compiler...

Enfin je ne sais pas qu'elle est la bonne méthode pour avoir mes accents, j'ai essayé pas mal de choses différentes mais sans résultat.
La dernière chose que j'ai tenté c'est de me connecter avec cette fonction en remplacant

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
maDb.setHostName("serveur3");
 maDb.setDatabaseName("gecotesttt");
 maDb.setUserName("administrateur");
 maDb.setPassword("xxx");

par

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

maDb.setDatabaseName("driver={SQL Server Native Client 10.0};server=SERVEUR3;uid=administrateur;pwd=xxx;database=gecotest;Trusted_Connection=yes;CharSet=ISO_8859_15") ;

j'espérais que l'option 'CharSet=ISO_8859_15' fonctionnerais mais ce n'est pas le cas (j'ai essayé plusieurs syntaxes pour iso_8859_1 mais peut etre jamais la bonne). Ma connection se deroule bien mais toujours ce problème de caractères spéciaux...

Bref je suis perdu, si vous avez la possibilité de me proposer quelque chose, une piste, une idée ou une baguette magique, quelque soit la méthode tant que cela fonctionne, je vous en serais vraiment reconnaissant...
merci de m'avoir lu

cordialement

[Amnell]

Bonsoir,

Quelques petites lignes à tester :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

qDebug() << maDb.driver()->hasFeature(QSqlDriver::Unicode);

S'il renvoie false, il y a sans doute un problème quelque part.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

reponseReq = QString::fromUtf8(qPrintable(maQuery->value(x).toString()));

On peut toujours tenter.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
QTextCodec *codec = QTextCodec::codecForName("ISO 8859-15");
reponseReq  = QString(codec->fromUnicode(maQuery->value(x).toString()));

Cela permettra de vérifier si on a plus de chance avec l'ISO 8859-15. Il faudrait tout de même tenter de trouver une requête à lancer pour récupérer l'encodage réel, cela permettrait de faire avancer les choses.

Bonne continuation,
Amnell.

[william wallace]

bonsoir et merci de la réponse !

donc

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

qDebug() << maDb.driver()->hasFeature(QSqlDriver::Unicode);

me retourne false

j'ai donc cherché l'encodage de ma base et vous aviez raison je suis bien en iso-8859-15:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
SELECT name, collation_name FROM sys.databases;
-> French_CI_AS

Ensuite j'ai cherché à utilisé votre code proposé

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
QTextCodec *codec = QTextCodec::codecForName("ISO 8859-15");
reponseReq  = QString(codec->fromUnicode(maQuery->value(x).toString()));

mais le problème persiste toujours.

Après réflexion je me suis dit (a tort ou à raison) que je devrais plutot utiliser toUnicode au lieu de fromUnicode. Ainsi j'ai utilisé le code suivant:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
QTextCodec *codec = QTextCodec::codecForName("ISO 8859-15");
reponseReq  = (codec->toUnicode(maQuery->value(x).toByteArray()));

Mais cela ne fonctionne pas egalement


Par contre en mode debug, les resultat retourné par maQuery->value(x) est toujours '/17775'. Avec l'aide d'une autre personne, on a découvert grace à google que:

FFFD REPLACEMENT CHARACTER
* used to replace an incoming character whose value is unknown or unrepresentable in Unicode
* compare the use of 001A as a control character to indicate the substitute function
U+FFFD, character �‬, decimal 65533, hex 0xFFFD, octal \177775, binary 1111111111111101
UTF-8: 0xf0 0x8f 0xbf 0xbd

Donc je suppose que le probleme est en amont...

Cette personne m'a egalement proposé de vérifier:

http://qt.developpez.com/doc/4.7/sql-driver/
Section "ODBC Unicode Support"
Q_ODBC_VERSION_2 ou not Q_ODBC_VERSION_2

mais la j'en sais rien et je ne trouve pas la réponse mais comme ma base n'est pas en unicode je pense que cela n'a rien a voir mais bon je me mélange un peu les pinceaux...

Enfin le driver que j'utilise est bien le bon ? "SQL SERVER NATIVE CLIENT 10.0" pour un "sql server 2008R2" ?

merci encore de vos réponses ...

[Amnell]

Bonsoir,

Je ne sais pas si cela peut ou non améliorer les choses, mais les lignes :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
QTextCodec::setCodecForCStrings(QTextCodec::codecForName("UTF-8"));
QTextCodec::setCodecForTr(QTextCodec::codecForName("UTF-8"));
QTextCodec::setCodecForLocale(QTextCodec::codecForName("UTF-8"));

Devraient probablement être changées par :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
QTextCodec::setCodecForCStrings(QTextCodec::codecForName("ISO 8859-15"));
QTextCodec::setCodecForTr(QTextCodec::codecForName("ISO 8859-15"));
QTextCodec::setCodecForLocale(QTextCodec::codecForName("ISO 8859-15"));

Les sources peuvent également être réencodées en ISO-8859-15, ce qui permettra d'appeler maQuery->value(x).toString() sans autre élément et d’interpréter correctement les données. Ou du moins, dans la théorie. Il y a également la piste de fromRawData() par rapport au résultat de la requête :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

reponseReq = QString(QByteArray::fromRawData(qPrintable(maQuery->value(x).toString()), maQuery->value(x).toString().size()));

Concernant le support de l'Unicode, je n'aime pas beaucoup le résultat (false), mais je ne saurais pas dire ce que ça change. Le fait d'éplucher cette page pourrait s'avérer utile (ils parlent d'UTF-16, à voir ce que ça implique).

Bonne continuation,
Amnell.

[william wallace]

merci de votre réponse, j'ai commencé à étudier tout ca, mais maintenant ca attendra lundi pour le reste.
bon week end !!



edit: en lisant la doc je me suis rendu compte que j'utilisais pas au bon endroit :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

 qDebug() << "code la base" << maDb.driver()->hasFeature(QSqlDriver::Unicode);

et en fait le resultat n'est pas false...

[Amnell]

C'est une information quelque peu rassurante. Bon week-end à vous, dans ce cas.

[william wallace]

Ce problème devant maintenant être absolument résolu je me suis replongé dedans. Après (encore) plusieurs jours de recherche j'ai enfin trouvé !

Et comme j'ai tellement galéré et perdu de temps que je viens partager la solution (malgré les 3 ans qui sépare ce jour de la date de mon 1er post). Vous allez voir, ca ressemble presque plus à un bug qu'autre chose !

En fait il suffit avant de préparer sa requête de faire un simple "clear()":

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
maQuery.clear() ;
 
maQuery.prepare(...) ;

C'est tout ! oui ! oui !

Au final cela fonctionne parfaitement et cela fait franchement plaisir !

En espérant que cela vous sera utile !

[aCody]