Discussion :

[Daïmanu]

Bonjour.

Dans l'optique de charger des données en base avec LOAD DATA depuis un csv, je dois transformer un champs vide en NULL car c'est une clé étrangère.

Typiquement, a~b~~d en "a", "b", NULL, "d".

Tout se joue après le SET.

Ce que j'ai essayé :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
LOAD DATA INFILE '/dump.csv' INTO TABLE clients FIELDS TERMINATED BY '~' (id, name, firstname, mail, other) SET mail=NULLIF(@mail='', NULL);
--ou
LOAD DATA … SET mail=IF(@mail=NULL, NULL, @mail)

Cannot add or update a child row: a foreign key constraint fails

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

LOAD DATA … SET mail=NULLIF(@mail=NULL, NULL);

Pas d'erreur, mais tous les champs sont à NULL.

La question est en gros comment MySQL considère un champs csv vide. Visiblement ce n'est ni NULL ni ''.

Une idée ?

[escartefigue]

Bonjour,

C'est probablement parce que dans la table que vous chargez, celle où cette colonne est FK, la colonne est déclarée "NOT NULL"
il faut donc simplement modifier le script du CREATE TABLE si cette colonne doit pouvoir être marquée "NULL"

La question est en gros comment MySQL considère un champs csv vide. Visiblement ce n'est ni NULL ni ''.

Et heureusement, vide c'est une valeur alors que null est un marqueur d'absence de valeur, rien à voir donc.

[Daïmanu]

La piste me semble bonne, et je n'y avais pas pensé.

Mais en regardant le script de création de la table, j'ai :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
DROP TABLE IF EXISTS `clients`;
CREATE TABLE `clients` (
  `id` varchar(255) NOT NULL,
  ...
  `mail` varchar(255) DEFAULT NULL,
  PRIMARY KEY (`id`),
  KEY `FK0e75e4e2i8px34fmjqwr4fl3x` (`mail`),
  CONSTRAINT `FK3m520efefl3447ier4xxp8jqw` FOREIGN KEY (`mail`) REFERENCES `accounts` (`mail`)
) ENGINE=InnoDB DEFAULT CHARSET=latin1;

je vais quand même tester de recréer les tables, au cas où.

[escartefigue]

ah mais non mais je n'avais pas vu ceci : SET mail=NULLIF(@mail='', NULL);. encore une fois, null ça n'est pas vide, il n'y aura jamais égalité

il faut faire comme ceci :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
set mail = 
     case when @mail='' then null
     else @mail
end

encore faut-il que la variable @mail contienne une valeur connue dans la table ACCOUNTS

[Daïmanu]

Bonjour.

Rien de changé avec la méthode de CASE.

Cela dit j'ai vérifié les dumps (plusieurs dizaines de millier de lignes) et il existe bien des mail qui n'existent pas dans account. Ce n'est donc peut-être pas un souci avec le champs vide.

Je fait un script vite fait pour purger les dumps et je vérifie cette hypothèse.

[Daïmanu]

Je confirme, c'était bien des mail qui n'existaient pas dans les comptes.

J'aurais du y penser avant, mais vu que le dump provient d'une autre base de données, je partais du principe que les données étaient intègres.

Merci pour m'avoir mis sur la piste.