Discussion :

[micakel_53]

Bonjour,

J'ai un tableau de données .CSV que je dois importer dans une table.

Extrait du fichier csv :

matricule;nom
1;toto
2;tata
3;titi

J'ai essayé d'utiliser psqlCopyFromArray mais j'ai en retour le message suivant :

Fatal error: Uncaught PDOException: SQLSTATE[22P04]: Bad copy file format: 7 ERROR: literal newline found in data HINT: Use "\n" to represent newline.

Voici ma méthode :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
require_once 'connect_bd.php' // connection à la base de données
 
$filename = $_FILES['userfile']['tmp_name'];  //recuperation du fichier envoyé en POST via le formulaire
 
//Stockage des données dans un tableau et suppression des éventuelles lignes vides
$data=[];
 
$file=fopen($filename,"r");
 
while (!feof($file)){
    $ligne= fgets($file,1024);
    array_push($data,$ligne);
}
 
print_r($data) //=> Array ( [0] => matricule;nom [1] => 1;TOTO [2] => 2;tata [3] => 3;titi ) 
 
 
$fields=array_shift($data); // Retrieve & remove the field list
$fields=str_replace(";",",",$fields);
echo($fields); //=>matricule,nom
 
print_r($data); //=> Array ( [0] => 1;TOTO [1] => 2;tata [2] => 3;titi ) 
 
$delimiter = ";";
$null_as=null;
 
$result=$pdo->pgsqlCopyFromArray('geolis.r_import',$data,$delimiter,$null_as,$fields);

Message d'erreur :

Fatal error: Uncaught PDOException: SQLSTATE[22P04]: Bad copy file format: 7 ERROR: literal newline found in data HINT: Use "\n" to represent newline. CONTEXT: COPY r_import, line 3 in C:\ms4w\Apache\htdocs\cyneclic\fdcm\www\espace_prive\geolis\geolis_query2.php:45 Stack trace: #0 C:\ms4w\Apache\htdocs\cyneclic\fdcm\www\espace_prive\geolis\geolis_query2.php(45): PDO->pgsqlCopyFromArray('geolis.r_import', Array, ';', '', 'matricule,nom\r\n') #1 {main} thrown in C:\ms4w\Apache\htdocs\cyneclic\fdcm\www\espace_prive\geolis\geolis_query2.php on line 45

Si quelqu'un peut me donner une piste pour résoudre ce problème, je suis preneur.

Bon courage à tous

[mathieu]

il y a peut être des sauts de ligne à la fin de chaque donnée. vous pouvez essayer de les retirer comme cela :

Code php :

Sélectionner tout - Visualiser dans une fenêtre à part

$data = array_map(function ($e) {return trim($e);}, $data);

[CosmoKnacki]

Tu peux essayer de remplacer $ligne = fgets($file, 1024); par $ligne = stream_get_line($file, 1024, "\n");.

stream_get_line fait exactement la même chose que fgets à la différence qu'il ne renvoie pas le délimiteur qu'on lui indique.

[micakel_53]

Bonjour,

Je viens d'essayer ta méthode et j'ai toujours un message d'erreur :

Fatal error: Uncaught PDOException: SQLSTATE[22P04]: Bad copy file format: 7 ERROR: literal newline found in data HINT: Use "\n" to represent newline. CONTEXT: COPY r_import_territoire, line 396 in C:\ms4w\Apache\htdocs\cyneclic\fdcm\www\espace_prive\geolis\geolis_query2.php:66 Stack trace: #0 C:\ms4w\Apache\htdocs\cyneclic\fdcm\www\espace_prive\geolis\geolis_query2.php(66): PDO->pgsqlCopyFromArray('geolis.r_import...', Array, ';', '', 'MATRICULE,CHASS...') #1 {main} thrown in C:\ms4w\Apache\htdocs\cyneclic\fdcm\www\espace_prive\geolis\geolis_query2.php on line 66

Par contre j'ai essayé le code suivant et je n'ai plus d'erreur mais je ne sais pas vraiment pourquoi :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
while (($line = fgetcsv($file)) !== FALSE) {
  //$line is an array of the csv elements
   $line = implode(',',$line);
   array_push($data,$line);
}

Si vous avez une explication je suis preneur.
Merci pour votre aide

[micakel_53]

Re bonjour,

Nouveau problème :

Lors de mon export en csv depuis ma base métier, il y a une ligne vide à la fin :


Si je supprime cette ligne manuellement tout fonctionne. Est ce qu'il y a un moyen d'ignorer cette ligne automatiquement ?

Merci

[CosmoKnacki]

Si ça n'a pas marché avec stream_get_line c'est sans doute que la séquence de nouvelle ligne utilisé dans ton fichier n'est pas juste \n mais \r\n, il suffit juste de le préciser.

Maintenant tu te compliques la vie: puisque tu passes toutes tes données d'un coup à ta base de données, pas la peine de te fatiguer avec fopen et une lecture ligne par ligne. Utilise directement la fonction file qui te mettra chaque ligne dans un tableau et qui en plus par le biais d'une option permet d'enlever automatiquement la séquence de nouvelle ligne et de filtrer les lignes vides (donc la dernière qui te pose problème).


[EDIT]C'est bien array_shift et pas array_unshift[/EDIT]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
$data = file($filename, FILE_SKIP_EMPTY_LINES | FILE_IGNORE_NEW_LINES);
 
$fields = strtr(array_shift($data), ';', ','); // doit-on vraiment changer le délimiteur ?
 
$delimiter = ';';
$null_as = null;
 
$result = $pdo->pgsqlCopyFromArray('geolis.r_import', $data, $delimiter, $null_as, $fields);

Ce type de code fonctionnera sous réserve qu'aucun de tes champs ne soit entre double quotes pour protéger un saut de ligne, sinon utilise fgetcsv.