Discussion :

[ffets]

Bonjour à tous,

Après quelques recherches sur le net et sur le forum je n'ai pas trouvé de réponse à ma question.

J'ai un fichier toto.xml dont je veux compter le nombre de lignes pour connaitre la fin de mon fichier.

Avec mes connaissances je sais faire :

fic=open('toto.xml', 'r')
lecture = fic.readlines()
N_lignes = len(lecture)
fic.close()

Mais j'aimerai compter ce nombre de lignes sans avoir à lire le fichier car charger le fichier en mémoire avec le readlines() c'est long si le fichir est gros !

Si vous avez une idée ou une piste à me donner je suis preneur

Merci

ffets

PS : mon titre est un peu nul mais j'n'ai pas trouvé mieux :S

[oiffrig]

Impossible sans lire, par contre au lieu de faire par readlines qui est lourd pour la mémoire si le fichier est gros, tu peux soit faire ça en dur (recherche de tous les retours à la ligne en cherchant caractère par caractère) soit compter les itérations d'une boucle for sur le fichier:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
fd = open('toto.xml', 'r')
n = 0
for line in fd:
    n += 1

[ffets]

soit compter les itérations d'une boucle for sur le fichier:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
fd = open('toto.xml', 'r')
n = 0
for line in fd:
    n += 1

Ok merci de l'info. C'est en effet d'une telle boucle for que je parlais dans mon post. Donc s'il n'y a pas mieux ça me rassure je ne fais pas que des trucs nuls !!

Merci
A+
ffets

[eyquem]

que j'ai vue là: http://www.developpez.net/forums/d61...-fichier-trie/

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
fd = open('toto.xml', 'r')
n = 0
while fd.readline():
    n += 1

Quelle avantage/inconvenient par rapport a ? :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
fd = open('toto.xml', 'r')
n = 0
for line in fd:
    n += 1

Il me semble que dans les deux cas ça lit les lignes du fichier une par une. Je ne vois pas ce qui pourrait se passer d'autre.

[M.L.G.]

Bonjour,
je ne peux pas dire quelles sont les avantages et inconvénients de l'une et de l'autre mais en faisant un test très simple (prendre un gros fichier (le mien fait 90Mo) histoire de voir réellement une différence)

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
import profile,time
 
 
def func1():
	fd = open("d:\\python\\bpss.txt", 'r')
	n = 0
	while fd.readline():
		n += 1
 
def func2():
	fd = open("d:\\python\\bpss.txt", 'r')
	n = 0
	for line in fd:
		n += 1
 
 
time_dep=time.time()
func1()
print time.time()-time_dep
time_dep=time.time()
func2()
print time.time()-time_dep
profile.run("func1()")
profile.run("func2()")

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
D:\python>python d:\python\new23.py
3.01699995995
1.28200006485
 
D:\python>python d:\python\new23.py
2.76700019836
1.28199982643
 
D:\python>python d:\python\new23.py
2.76800012589
1.28200006485

on s'aperçoit que sur un gros fichier (plus de deux millions de lignes) la différence est de 1.5sec, la boucle "while fd.readline():" est donc plus rapide que la boucle "for line in fd:" mais sur des fichiers de taille normal je dirais que l'un équivaut à l'autre


Après évidement il y a surement des cas ou l'on préférera l'un à l'autre mais je ne suis pas assez calé pour répondre.

M.L.G.

[GnuVince]

Une façon que j'aime pour compter le nombre de lignes (peut-être pas aussi rapide qu'une boucle for par contre):

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
 
n = sum(1 for _ in open('/etc/passwd'))