[php-mysql] Requete gros traitements

Bonjour,

Dans ma base de données, je gére des badges. Je doit changer le format des badge. Ils sont sur 3 chiffres et on doit passer à 3 lettres.

Donc je doit mettre à jour 3 tables pour chaque personnel. Soit environ 15000 requetes.

Dans un premier temps j'ai fait au plus simple je parcours la table des personnels, et je lance les 3 requétes de mise à jour. Ca fonctionne sauf que je suis limité à 30 secondes pour la durée de mon script ce qui correspond à envrion 500 personnels j'en ai envrion 5000 :? (chose que je ne peut modifier).

D'où m'est venu l'idée de de faire des lots. Problème je ne sais pas trop comment faire.

J'ai essayé en concaténant des requétes mais j'ai une erreur de syntaxe. Voici la synthaxe que j'utilise:

Code:

---

1 2	$update_histo.="UPDATE inv_utilisateur_badge SET badge='".$badge[$nb_badge]["badge"]."', u_id='" . $req[$nb_badge]["u_id"] . "', date_attribution='$current_datetime'; ";

---

j'utilise un ; pour séparer mes requétes mais visiblement mysql_query (je m'en doutais) n'aime pas trop voici l'erreur:

Code:

---

1 2	1064: Erreur de syntaxe près de '; UPDATE inv_utilisateur_badge SET badge='4PO', u_id='33378', da' à la ligne 1

---

Qu'en pensez vous ? D'avance merci de vos réponses.

Salut,

mysql_query() ne permet d'envoyer qu'une seule requête à la fois. De plus, ça n'aurait rien changé niveau performance, le serveur les aurait traitées l'une après l'autre.

Est-il normal que tu n'aies aucune clause WHERE dans ta requête ?? Le changement de badge peut-il se faire par un "calcul" ou possèdes-tu une liste de correspondance xxx->yyy ?

Je suppose que tu ne travailles pas avec des tables InnoDB. Dans ce cas, tu n'aurais eu qu'une seule requête à faire et les contraintes de clés étrangères auraient garder la cohérence.

Pour optimiser, tu peux tenter de faire des prepared statements si tu utilises MySQL >= 4.1 : voir http://maximilian.developpez.com/mys...ed-statements/.

De plus, tu peux tenter de faire tous tes updates dans une seule transaction puis faire un commit à la fin (InnoDB). Pour MyISAM, tu peux simuler ce comportement avec un LOCK sur les tables concernées.

Je ne sais pas si tu vas pouvoir passer sous la barre des 30sec, mais c'est déjà un début.

Le pb est que je suis en myIsam et PHP 4:cry:. comme tu l'a remarqué.
Merci pour les infos. J'ai regardé mais visiblement ça marche pas avec php4

tu peux essayer d'utiliser cette syntaxe :

Code:

---

1 2 3 4 5 6

UPDATE table SET badge = CASE WHEN u_id = ... THEN ... WHEN u_id = ... THEN ... ELSE badge END, date=date, ...

---

en générant automatiquement la requete UPDATE a partir d'une liste d'u_id et de nouvelles valeurs de "badge" associée. J'ai deja fait un truc identique pour une migration de donnée un peu comme toi et ca marchait bien.

Par contre, ca n'empeche que tu devra sans doute faire un traitement par lot pour pas traiter tout les utilisateurs en meme temps.

J'ai essayé avec le case mais c'est plus lent.