Problème LOAD DATA IN FILE

[LostRailler]

Bonjour à tous,

J'ai un problème avec une requête LOAD DATA IN FILE que je n'arrive pas à écrire.

Voici le format de mon fichier csv :

NOM;PRENOM;SEXE;NAISSANCE;CP;VILLE
nom1;prenom1;h;1984-09-03;13100;AIX
nom2;prenom2;f;1989-12-06;13100;AIX
nom3;prenom3;f;1979-08-29;13800;ISTRES

Ma table PERSONNE contient les champs :
id, nom, prenom, naissance, ville

Pour le début de ma requête la syntaxe est je pense :

Code :

1
2
3
4
5
6
7
8
9
10
11
 
LOAD DATA INFILE ‘fichier.csv’
        INTO TABLE PERSONNE
FIELDS
        TERMINATED BY ';'
        ENCLOSED BY ''
LINES
        STARTING BY ''
        TERMINATED BY '\n'
IGNORE 1 LINES
(nom, prenom, naissance, ville)

Donc les colonnes SEXE et CP de mon csv ne me servent pas dans ma base.
Comment dire à ma requête de ne pas les prendre en compte ?

Je ne trouve pas la syntaxe qui me permet de dire tels colonne du csv correspond à tel champs de ma table.

Merci d'avance si vous arrivez à m'aider

[jeca]

Bonjour,

Extrait du manuel mysql :

Si vous voulez charger uniquement quelques colonnes dans une table, spécifiez la liste des champs :

mysql> LOAD DATA INFILE 'persondata.txt'
-> INTO TABLE persondata (col1,col2,...);

Vous devez aussi spécifier les champs si l'ordre dans lequel ils seront lus diffère de l'ordre des colonnes dans la table. Sinon, MySQL ne pourra pas savoir à quelle colonne correspond une valeur.

Ici : http://dev.mysql.com/doc/refman/5.0/fr/load-data.html

[LostRailler]

Merci pour ta réponse mais ce que tu me dis je l'avais lu et je le met dans mon exemple (les champs de ma table sont spécifiés à la fin de ma requête).

Vous devez aussi spécifier les champs si l'ordre dans lequel ils seront lus diffère de l'ordre des colonnes dans la table

En fait ce que je veux savoir c'est comment je les indique les champs du fichier csv ? Comment je lui dit que le champs ville de ma table correspond au champs VILLE de mon csv ?

[Nudger]

Bonjour,

Ce que fait MySQL, la doc en parle.
Si la doc n'en parle pas, MySQL ne le fait probablement pas.

[LostRailler]

Bonjour,

ok, au cas ou il y avait un moyen de contourner ce problème
Tant pis, je vais faire l'import en parsant ligne par ligne le csv en php.

Merci de vos réponses

[CinePhil]

Pour compléter ce que dit Nudger :

Envoyé par Documentation MySQL

Si une ligne d'entrée comporte trop de colonnes, les champs en trop sont ignorés, et le nombre d'alertes est incrémenté.

Dans ton cas, tu veux ignorer une colonne du fichier source et MySQL ne sait pas le faire.

La solution : transférer toutes les données dans une table temporaire et ensuite requêter cette table pour alimenter la vraie table.

[LostRailler]

Yes mais en fait le problème est plus complexe que ça dans mon cas.
J'ai pris un exemple simple pour pas rentrer dans des explications longues.

En fait mon fichier csv comprend une trentaine de colonnes et ma table aussi.
Certaine colonne du csv n'apparaissent pas dans ma table et vis-versa.
Et j'ai environ 150 000 lignes.

Alimenter une table temporaire et transférer dans ma table définitive me prend autant de temps que de parser le csv en php et faire des INSERT.

Autre solution mais je ne la teste pas car elle me semble encore plus longue qui consiste à reconstruire mon csv automatiquement. Mais celui-ci est amené à évoluer régulièrement...

En tout cas encore merci pour votre réactivité

[CinePhil]

Importer 150 000 lignes CSV doit prendre moins d'une minute.

Une fois la requête créée, alimenter la vraie table à partir des 150 000 lignes de la table temporaire ne devrait pas prendre plus d'une seconde.

Parser le fichier CSV en PHP et faire 150 000 requêtes INSERT à partir du PHP doit prendre à mon avis beaucoup plus longtemps !
Je me souviens avoir été obligé de faire ce genre de truc pour scinder une colonne multi-données et j'avais dû lancer le programme en deux fois en repérant à quelle ligne de la table il s'était interrompu par max_execution_time.
En plus, la requête SQL est plus sûre que le programme PHP.

Et si le fichier est à importer plusieurs fois mais que sa structure ne change pas, il suffit d'enregistrer la requête dans un fichier texte ou de faire un programme PHP qui lance d'abord la requête LOAD DATA INFILE puis la requête d'alimentation de la vraie table.

[dxerty]

Essaye ceci:

Code :

1
2
3
4
5
6
7
8
9
10
LOAD DATA INFILE 'fichier.csv'
        INTO TABLE PERSONE
FIELDS
        TERMINATED BY ';'
        ENCLOSED BY ''
LINES
        STARTING BY ''
        TERMINATED BY '\n'
IGNORE 1 LINES
(nom, prenom, @sexe, naissance, @cp, ville)