Discussion :

[kekesilo]

Bonjour,

J'ai besoin de lire un fichier texte (taille environ 100Mo) pour extraire certaine informations tres rapidement, car cette tache est excéuté tous les x minutes.

Lire un fichier texte ligne par ligne, par de soucis mais maintenant que j'ai besoin d'être plus performant dans le temps de lecture du fichier, j'ai pas beaucoup d'idée..... donc la méthode avec StreamReader, la méthode ReadLine pour lire n'est pas assez rapide !!!

Toute aide, piste à explorer sont les biens venus....afin de lire un fichier texte assez gros tres tres vite afin d'y extraire certaines infos

Merci d'avance

[notalp]

t'es forcé de rester en c# ??
Sinon tu as le perl qui est ULTRA performant

[kekesilo]

Yes, développement en C# .NET 2.0 sous Windows XP et Visual Studio 2005.

Est-ce que c'est possible d'améliorer en terme de rapidité la lecture de fichier texte ???

Toute aide, piste à creuser, je prends ......

[JEG]

Si tu n'as que quelques infos à lire dans ce fichier, le mieux c'est que ton fichier soit indexé. Une partie au début du fichier te fait "pointer" vers les offsets du fichier dans lesquels il y a les infos que tu cherches. tu utiliseras donc la méthode Stream.Seek() pour te positioner au bon endroit avant de lire le fichier.

[kekesilo]

Bonne idée JEG mais le problème c'est que je ne suis pas maître du fichier texte, c'est un fichier de log d'un serveur Web, que je récupère et que je dois parcourir pour essayer d'y trouver certaines infos particulières

En attente d'idée.....

[joujoukinder]

A a pas de miracle, il va bien falloir que tu ouvres ton fichier d'une façon ou d'une autre et que tu lises chaque ligne.

A voir maintenant si tu veux le faire ligne par ligne, ou si tu peux peut-être faire plusieurs traitements en même temps avec des threads, qui liraient chacun une partie du fichier.

Mais il me semble que 100 Mo pour un fichier de log c'est pas mal, non? Faudrait peut-être diminuer sa taille dans les options du serveur...