déterminer séparateur et enclosure d'un fichier CSV

Version imprimable

Bonjour,

jusqu'à présent, j'utilisais sans souci un code pour déterminer séparateur et enclosure d'un fichier CSV. Cependant, cherchant à mettre au point une nouvelle fonctionnalité, j'utilise de nouveau ce code et pour un CSV dont le caractère d'enclosure est ", il me trouve qu'il n'y en a pas. D'où ça vient SVP ?

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
 if (( ! is_file($filepath)) || (false === (self::$handle = fopen($filepath, 'r')))) {
            throw new Exception("impossible to open the file '$filepath'");
        }
 
if (isset(self::$handle)) {
            $row = fgets(self::$handle);
            $row=strtolower($row); //mettre header en minuscules
        } // doit contenir les en-têtes des colonnes}
        if (empty($row)) {
            self::$errors[] = 'The file is empty';
            return false;
        }
 
        // séparateur
        if (mb_stripos($row, ',') !== false) {
            self::$separator = ',';
        } elseif (mb_stripos($row, ';') !== false) {
            self::$separator = ';';
        } else {
            self::$errors[] = 'Unable to detect the CSV field separator';
            return false;
        }
 
        $char = mb_substr($row, 0, 1); // premier caractère
        if ($char === '\xef\xbb\xbf') {  //if first character is BOM, one begins with the next character
            $row  = mb_substr($row, 1);
            $char = mb_substr($row, 0, 1);
        }
 
        if (($char === '"') && (mb_stripos($row, '"'.self::$separator.'"') !== false)) {
            self::$enclosure = '"';
        } elseif (($char === "'") && (mb_stripos($row, "'".self::$separator."'") !== false)) {
            self::$enclosure = "'";
        }
 
        if (self::$enclosure) {
            // on vérifie que le premier séparateur trouvé est bien entouré de lettres ASCII
            $i = mb_stripos($row, self::$separator);
            if ($i) {
                $fc = mb_substr($row, $i - 1, 1);
                $lc = mb_substr($row, $i + 1, 1);
                if (ctype_alpha($fc) && ctype_alpha($lc)) {
                    self::$enclosure = '';
                }
            }
        }
        else  self::$enclosure = '';

Le fichier CSV :

Mois de Months;Regions (1);Reopened;Reported Source;Resolution;Resolution OLA Status
sept-21;MEA;No;Phone;Please retrigger the profile.;Missed
sept-21;MEA;No;Web;"ISSUE: Opus - OE Tools
CAUSE: I cannot install new OPUS Tool  issue is I do not have Administrator 
RESOLUTION: 
DID USER CONFIRMED ISSUE RESOLVED: Yes
To obtain more detailed information about this ticket, you just have to go to the 2929IT Portal Ho";Missed

Salut,

C'est quoi le soucis exactement ? Avec le fichier csv posté et en utilisant

Code:

1
2
3
4
5
6
7
8
 
$handle = fopen('file.csv', 'r');
$rows = [];
while (($data = fgetcsv($handle, 0, ";")) !== FALSE) {
    $rows[] = $data;
}
echo '<pre>';
print_r($rows);

j'obtiens

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
 
Array
(
    [0] => Array
        (
            [0] => Mois de Months
            [1] => Regions (1)
            [2] => Reopened
            [3] => Reported Source
            [4] => Resolution
            [5] => Resolution OLA Status
        )
 
    [1] => Array
        (
            [0] => sept-21
            [1] => MEA
            [2] => No
            [3] => Phone
            [4] => Please retrigger the profile.
            [5] => Missed
        )
 
    [2] => Array
        (
            [0] => sept-21
            [1] => MEA
            [2] => No
            [3] => Web
            [4] => ISSUE: Opus - OE Tools
CAUSE: I cannot install new OPUS Tool  issue is I do not have Administrator 
RESOLUTION: 
DID USER CONFIRMED ISSUE RESOLVED: Yes
To obtain more detailed information about this ticket, you just have to go to the 2929IT Portal Ho
            [5] => Missed
        )
 
)

n'est-ce pas le résultat attendu ?
D'où provient le fichier csv que vous manipulez ?

19/10/2021, 17h25
laurentSc
Merci pour la réponse.
C'est un bon début sauf que vous n'obtenez que la première ligne (le header).

Mon souci est que $enclosure est mal déterminé.

J'utilise le résultat en faisant :
Code:

1 2 3 4 5 6 7 $i=0; while (($line[] = fgetcsv($file, 4096, $separator, $enclosure)) !== false) { $key = $header; $value = $line[$i++]; $data[]=array_combine($key, $value); }
Ce CSV est en fait un extract d'une autre bdd.
19/10/2021, 17h32
Willy_k

Y'a un scroll sur le 2ème code . On a bien le header + les données
19/10/2021, 17h45
laurentSc

mea culpa. Il faudra peut-être que je fasse changer mes lunettes !

Cependant, vous voyez bien dans l'utilisation que je fais des données, que j'ai besoin d'un $enclosure correct. Or, ce n'est pas le cas...
19/10/2021, 17h56
Willy_k

Je ne comprends pas réellement le soucis. "$enclosure" correct ça veut dire quoi ? Et c'est quoi comme utilisation ?
19/10/2021, 18h16
laurentSc
Mon utilisation est donnée dans le post #3.

enclosure est un des paramètres de la fonction fgetcsv : https://www.php.net/manual/fr/function.fgetcsv.php. C'est le paramètre d'encadrement. Dans mon CSV, il vaut " et est utilisé pour la cellule sur plusieurs lignes.
```
"ISSUE: Opus - OE Tools
CAUSE: I cannot install new OPUS Tool  issue is I do not have Administrator 
RESOLUTION: 
DID USER CONFIRMED ISSUE RESOLVED: Yes
To obtain more detailed information about this ticket, you just have to go to the 2929IT Portal Ho"
```
19/10/2021, 19h14
Willy_k

Pour faire simple, de ce csv quel est résultat voulu?
Je sais ce qu'est un caractère d'encadrement ou "enclosure" si vous voulez.. Mais le rapport avec le résultat voulu, je ne le vois pas
19/10/2021, 19h35
laurentSc

Le but est que le code du post #3 construise le tableau $data ainsi :

Citation:

0 : Mois de Months => sept-21 ; Regions (1) => MEA ; Reopened => No ; Reported Source => Phone ; Resolution => Please
retrigger the profile. ; Resolution OLA Status => Missed

1 : Mois de Months => sept-21 ; Regions (1) => MEA ; Reopened => No ; Reported Source => Web ; Resolution => ISSUE: Opus - OE Tools
CAUSE: I cannot install new OPUS Tool issue is I do not have Administrator
RESOLUTION:
DID USER CONFIRMED ISSUE RESOLVED: Yes
To obtain more detailed information about this ticket, you just have to go to the 2929IT Portal Ho ; Resolution OLA Status => Missed
19/10/2021, 21h05
Willy_k
Aucun rapport entre le résultat voulu et cette histoire d'enclosure. A partir de mon code, on peut utiliser ça
Code:

1 2 3 4 5 6 7 8 $results = []; $data = array_slice($rows, 1); foreach ($data as $row) { $results[] = array_combine($rows[0], $row); } var_dump($results);
Tout simplement, on a sûrement d'autres manières de faire
19/10/2021, 22h37
laurentSc

Merci beaucoup pour l'aide :plusser:; j'ai encore des petits soucis pour utiliser votre code mais je suis un peu fatigué :zzz:; ça devrait aller mieux demain matin...

Bonjour Willy_k,

tous comptes faits, j'ai pas eu le temps ce matin...

J'ai réussi à utiliser votre code en mode debug :
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 $handle = fopen(dirname(dirname(__FILE__)).DIRECTORY_SEPARATOR.'csv'.DIRECTORY_SEPARATOR.'testicket' .DIRECTORY_SEPARATOR.'Trends_INC_ sep_debug7.csv', 'r'); $rows = []; while (($data = fgetcsv($handle, 0, ";")) !== FALSE) { $rows[] = $data; } // echo '<pre>'; // print_r($rows); $results = []; $data = array_slice($rows, 1); foreach ($data as $row) { $results[] = array_combine($rows[0], $row); } var_dump($results);
Mais si je l'intègre dans mon appli, ça marche plus.
Code:

1 2 3 4 5 6 7 8 9 $rows = []; while (($theData = fgetcsv(self::$handle, 0, self::$separator)) !== FALSE) { $rows[] = $theData; } $myData = array_slice($rows, 1); foreach ($myData as $row) { self::$data[] = array_combine($rows[0], $row); }
Quand je dis que ça marche plus, c'est que le tableau self::$data vaut

Citation:

0 : sept-21 => sept-21 ; MEA => MEA ; No => No ; Phone => Web ; Please
retrigger the profile. => SSUE: Opus - OE Tools
CAUSE: I cannot install new OPUS Tool issue is I do not have Administrator
RESOLUTION:
DID USER CONFIRMED ISSUE RESOLVED: Yes
To obtain more detailed information about this ticket, you just have to go to the 2929IT Portal Ho ;
Missed => Missed

Je vois pas où est le problème...

Je n'ai pas cherché à comprendre pourquoi mais j'ai découvert que $rows[0] ne contenait pas le header. La bonne solution est finalement :

Code:

1
2
3
4
5
6
7
8
9
$rows = []; //UtilFct::debug("csvparser 98 separator ",self::$separator);
while (($theData = fgetcsv(self::$handle, 0, self::$separator)) !== FALSE) {
      $rows[] = $theData;
}
 
$myData = array_slice($rows, 1);
foreach ($myData as $row) {
     self::$data[]  = array_combine(self::$header, $row);
}