Discussion :

[beyo]

Bonjour,

Afin de lire un fichier csv, contenant potentiellement de très nombreuses lignes, je souhaite lire N lignes à la fois et récupérer les données pour les traiter. puis lire les N lignes suivante, etc.

Le fichier csv est "standard" : X lignes de contenu séparé par des virgules

Avec la fonction file(), j'obtiens le résultat attendu mais le traitement des lignes csv est à prendre en compte (explode serait à ajouter)

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
 
function useFile($csvfile, $offset, $lines2read)
{
	if (file_exists($csvfile))
	{
		$tab = array();
		$lines = file($csvfile);
		$max = count($lines);
		for($i=$offset;$i<$offset+$lines2read;$i++)
		{
			if ($i<$max && trim($lines[$i]) != '')
			{
$tab[$i] = $lines[$i];
			}
		}
		return $tab;
	}
	else
		return false;
}

c'est pourquoi je pensais à la fonction seek de SplFileObject :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
 
function readFileSeek($csvfile, $offset=0, $lines2read=3)
{
	if (file_exists($csvfile))
	{
		$tab = array();
		$file = new SplFileObject($csvfile, 'rb');
		for($i=0;$i<$lines2read;$i++)
		{
			if (! $file->eof())
			{
				$line= $offset+$i;
				$file->seek($line);
				$csvline = $file->fgetcsv();
$tab[$line] = $csvline;
			}
		}
		return $tab;
	}
	else
		return false;
}

cette fonction me renvoie un tableau de tableaux d'élément de chaque ligne. C'est ce que j'attends.


Sauf que pour une raison que je n'arrive pas à expliquer, si par exemple je veux lire 5 lignes, à partir du début
var_dump(readFileSeek($csvfile, 0, 5));

j'obtiens le contenu de la ligne 0, 2, 3, 4, 5 ! la fonction "saute" la 2eme ligne
Et c'est là même chose si je change la ligne de départ, ce sui signifie qu'il n'y a pas de problème de reconnaissance de fin de ligne.
Ce problème me laisse perplexe !
y'a t'il quelqu'un qui a une explication (et une solution) ?
Merci d'avance

[Séb.]

Compliqué tout ça.

Utilise plutôt fopen/getcsv/fclose.

[sabotage]

Il y a un bug sur ce sujet ouvert en ... 2008

https://bugs.php.net/bug.php?id=46569

[beyo]

merci pour avoir pointé le bug, j'étais passé à coté.

Compliqué tout ça.

bah là c'est rien encore
Je m'y prends peut-être mal, mais le but est de :
1) récupérer les n premières lignes du csv
2) effectuer un traitement sur le contenu
3) récupérer la position de la ligne
4) reprendre l'étape 1 à partir de n+postiion

je pense lancer la boucle dans ma page principale et faire un appel jquery / ajax pour permettre le traitement d'une part (etapes 1 à 4) et renvoyer la position de la ligne pour la réinjecter dans le tour de boucle suivant.

le traitement des données récupérées pouvant être long (gestion d'images, insertion de données dans la BDD...), je dois effectuer cette lecture par morceau du fichier. D'où mon code.

je n'ai pas trouvé de code ou de fonction php permettant de lire uniquement n lignes d'un fichier csv.
C'est pourquoi j'imagine cette solution "compliquée".
Si vous avez plus simple ou une fonction toute faite, je suis preneur.

Utilise plutôt fopen/getcsv/fclose.

, ça ne me paraît à première vue pas idéal pour parser du csv. J'ai lu qu'il y a potentiellement des problème si l'encodage du fichier s'embrouille pour les retour à la ligne. (je n'ai pas noté la référence du post).