[QString] Quelle est la taille maximum d'un QString?

Bonjour,

Je travail actuellement avec un QString et Qt en version 4.7 sous Window7.
Mon programme afficher un gros document HTML pour cela j'utilise un QString qui va contenir le code html à partir d'une base de données.

Je constate empiriquement que la taille maximum est d’environ 2^27, pour cela j'utilise le code suivant :

Code:

---

1 2 3 4 5 6 7

QString test = "";   for (unsigned int i =0; i< 135217728 ; ++i) { test +="0"; }

---

Lors de l’exécution j'ai ce genre de message d'erreur:

Citation:

---

Exception non gérée à 0x670d610e dans test.exe : 0xC0000005: Violation d'accès lors de l'écriture à l'emplacement 0x00000004.

---

et i = 134 217 718.

1) Est ce que j’atteins la limite d'un QString?
2) Pourquoi la taille max serait vaut 2^27 (chaque caractère est codé sur 5 octets?) ?

Merci d'avance pour vos réponses.

2^27 octets = 128 Mo... tu as réellement des pages html qui font 128 Mo de texte ??? :aie:

Sinon, c'est plus une limitation de la taille allouable par le système qu'une réelle limitation de la taille de ta QString

Chez moi par exemple, ton code plante pas (ubuntu 64b)

EDIT : chez moi, ça plante à 1073741824, soit 1 Go

Merci pour ta réponse.

J'affiche l’équivalent de 9000 gros textes sur la page (c'est pas pour le web :p).

- Est il possible de modifier cette limite avec une option de compilation?

Mon système possède 6 go ram il pourrait supporté plus 128Mo d'allocation...

Je pense que les caractères sont codés sur au moins deux octets puisqu'il les sort en utf8 sur demande.

Tu possèdes combien de RAM sur ton pc sur Ubuntu 64bit?

2 Go :)

Pas d'option de compilation. Je pense plutôt à un problème de gestion mémoire par le système

Mais quelque soit la source du texte, c'est quand même abérant une page de 128 Mo. Tu ne peux pas afficher 128 Mo de texte dans une page visible en même temps (donc aucun intérêt) et le temps de chargement/affichage sera inutilement long.
Une approche intelligente serait de charger et afficher la page par paquet. Ce qui rend inutile les QString de 128 Mo.

Il semblerait que cette limite soit de 2^30 caractères (en UTF-16, représentation interne utilisée par QString) : http://qt-project.org/forums/viewthread/10555. Il me semble que le dernier message contienne une sagesse :

Citation:

---

To summarize: if you find yourself wondering about reaching this limit, you had better start wondering about your design at a more fundamental level.

---

Ah oui, 1073741824 ça fait bien 2^30 :)
Bref, tout comme j'ai dit : c'est pas une bonne idée d'avoir une QString avec une taille pareil

Le problème c'est qu'actuellement c'est des QString qui sont utilisés avec des QRegEx. Donc je voudrais savoir pourquoi ce n'est pas 2^30 comme toi mais 2^27 chez moi? De plus je fais le même test en remplaçant QString par QByteArray et j’atteins un peu moins de 2^28 pour valeur de i avant le crash.

Mon système est un Window7 64 bits et j'ai 6go de RAM. Lorsque je regarde la consommation du programme avec processXP, j’atteins a peine 555 Mo ( et il me reste 3go de libre).

Mon problème c'est connaitre la limite quelque soit la cible.

Je te l'ai dit, à mon avis, c'est une limitation de la taille des bloc mémoire par windows

Ok je vais voir ce que je trouve la dessus.

Quel le comportement sous Linux quand tu atteins la taille de 2^30? Linux te lève une exception ou il crash le programme sans rien dire?

exception bad alloc

Je rejoins les autres, sous windows la gestion mémoire est comment dire, hum voilà quoi.

J'ai découvert 2-3 petits trucs :
- en fonction de la version de windows (Pro, family, ultimate etc) la RAM maximum utilisable par un process est différente (qq soit la ram totale de la machine).
- se renseigner sur le flag suivant, il m'a permis de monter encore un peu sous certains systèmes

Code:

---

1 2	# QMAKE_LFLAGS_WINDOWS does not work for some reason QMAKE_LFLAGS += /LARGEADDRESSAWARE

---

QString et QByteArray allouent leur mémoire de manière contigue, cela rajoute encore une contrainte de gestion mémoire. Dans ta boucle, à chaque ajout d'un caractère il peut y avoir une réallocation complète de la string (avec copie et tout le toutim j'imagine).

J'en en effet trouvé ceci :
http://msdn.microsoft.com/en-us/library/aa366778.aspx

Mon programme est compilé en 32 bits, sur un OS 64 bit. Donc il pourra adresser que 4 go max en théorie.

L'option du linker LARGEADDRESSAWARE fonctionne mieux, en effet j'arrive à monter à i = 536 870 902 avec le test du QString sachant qu'il prend 2 octets pour un caractère, le tableaux doit prendre 1go de RAM.
ProcessXP me dit que programme a pris 1.5go de RAM au maximum.

Je vais lire tous ça, afin de mieux comprendre, il semble qu'il y ait plusieurs subtilités.

Pour résoudre mon problème, je vais "catcher" l'exception bad_alloc et me débrouiller pour stocker le documents sur le disque.

Merci à tous pour vos réponses.

ps : comment on marque que le topic est résolu?