bonjour
j'ai une table de prés de 20000 ligne stocké dans une variable php, cette table est issue du résultat de la lecture d'un cvs, là aucun souci
pour insérer cette table dans ma base de données, j'ai fait une boucle (for...) qui là parcoure et pour chaque ligne lance le script d'insertion.
Là je me demandé si c'est pas possible de faire autrement (genre utiliser un buffer)
La réponse n'est pas simple et je ne suis pas sur que tu aies posté dans le bon forum.
Donc je vais faire des présupposés, qui pourraient être faux :
- tu travailles avec symfony.
- tu utilises doctrine (éventuellement propel) et tu souhaites absolument garder une indépendance total avec la base de données (pour en changer sans avoir à toucher le code).
A partir de là, il n'y a pas des centaines de possibilités.
La tiennes, lecture séquentiel des enregistrements dans une boucle, création d'un enregistrement puis sauvegarde est très proche d'être la plus optimisée. Tu pourrais, peut-être gagner un peu en regroupant les enregistrements dans une transaction, les enregistrements étant alors traités par lots par le serveur, mais je ne sais pas si le gain de performance sera énorme, en effet, il faudrait savoir si l'enregistrement d'une ligne sur le serveur de la base de données est plus ou moins rapide que la génération de la ligne par php, si le goulot (et je crains bien qu'il soit là) est la vitesse de création d'un enregistrement sous php (surtout avec une couche d'abstraction), dans ce cas, gagner sur le traitement par la base de donnée ne sera pas probant. D'autant que tu ne pourras pas traiter les 20.000 enregistrement dans une transaction, tu vas donc devoir faire tourner deux boucles, une pour le parcours de la table, l'autre, à l'intérieur de la première, pour enregistrer par paquet de lignes, donc du code et des tests supplémentaires qui vont, eux aussi, bouffer le gain obtenu par les transactions.
Maintenant, si je me suis trompé dans mes présupposés, il y a alors d'autres solutions.
Merci pour tes éclaircissement