Discussion :

[defcom60]

j'ai un peu avancer j'arrive a savoir si un nom de fichier existe dans la liste.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
 
lieu="TB1519"
date="05032008"
heure="1140"
 
list=[x for x in os.listdir("répertoire de recherche") if lieu + "_" + date + "_" + heure in x]
print list

je continu a chercher.

[N.tox]

Et tu y est presque , déjà avec ça, tu peux obtenir tous les fichiers d'un même jour, si l'heure et le lieu importe peu, retires ces deux derniers éléments de la condition filtrante de ta comprehension list... continues

[defcom60]

bonjour,

petit question comment on fait pour faire passer une fonction en chaine de caractére.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
 
 
lieu="TB1519"
date = datetime.date.today().strftime("%d%m%Y")
heure="1140"
 
list=[x for x in os.listdir("repertoire de recherche") if lieu + "_" + ""+date+"" + "_" + heure in x]
print list

j'ai un petit probleme avec la variable date cela me renvoye une liste vide, je pense qu'il y a un probleme de syntaxe.

[N.tox]

Ok, alors je ne m'étais jamais servi de datetime, mais je crois avoir trouvé une soluce
alors... procédons par étapes avant de faire une ligne de code compacte

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
#on sait que:
>>> datetime.date.today()
datetime.date(2008,6,16)
 
#maintenant essayons de le convertir en string avec str(), pour voir ce que ça donne:
>>>str(datetime.date.today())
'2008-06-16'
 
#Ah.... déjà on sait qu'on peut facilement manier un string...bon, faisons de ceci une liste:
>>>str(datetime.date.today()).split('-')
['2008','06','16']
 
#C'est presque ça mais faudrait inverser l'ordre de cette liste, et on peut y arrivere par un moyen très simple ex [1,2,3][::-1]=[3,2,1] donc:
>>>str(datetime.date.today()).split('-')[::-1]
['16','06','2008']
 
#Maintenant on voudrait réunir tous les éléments de cette liste en un string, on va donc utiliser .join() (pour plus d'info tapes help(''.join) dans l'interpreteur):
>>> ''.join(str(datetime.date.today()).split('-')[::-1])
'16062008'

Et voilà !

[defcom60]

bonjour,

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
 
print "today:", datetime.date.today().strftime("%d%m%Y")
today: 16062008

la commande ci dessus donne le meme résultat.
mon probléme est que je veut passer par une variable date qui represente cette fonction datetime.date.today().strftime("%d%m%Y")
et je ne sais pas comment l'ecrire dans ma syntaxe.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
 
if lieu + "_" + date + "_" + heure in x]

lieu et heure fonctionne car lieu="TB1519" et heure="1120"

[defcom60]

re

c'est bon j'ai trouver le probleme c'etait des guillements en trop ce qui donne

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
 
lieu="TB1519"
date = datetime.date.today().strftime("%d%m%Y")
heure="1140"
 
list=[x for x in os.listdir("repertoire de recherche") if lieu + "_" +  date  + "_" + heure in x]
print list

[defcom60]

je suis bloquer je n'arrive pas a lister les fichiers.

existe t'il un caractére joker comme pour excel par lister par exemple

TB1519_16062008_* qui me retourne tour les fichiers commençant par TB1519_16062008_ sans tenir compte de l'heure.

[yacinechaouche]

J'étais curieux de tester les performances de filter pour faire le même boulot :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
 
import os
files = os.listdir(".") 
filter(lambda x: "h" in x,files)

Ce code tourne presque 2 fois plus lentement que le code équivalent en liste de compréhension ! la raison est simple : un appel de fonction (même sous lambda-form) est beaucoup plus couteux qu'un simple if !

A mon avis, filter ne devrait être utilisé que sa la fonction de filtre est vraiment compliqué à écrire.

Je suis curieux de savoir qui va le plus vite : filter(fonction, liste) ou [x for x in liste if fonction(x) ] ??

[N.tox]

Si

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

date = datetime.date.today().strftime("%d%m%Y")

Fonctionne bien
ton code

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
lieu="TB1519"
date = datetime.date.today().strftime("%d%m%Y")
heure="1140"
 
list=[x for x in os.listdir("repertoire de recherche") if lieu + "_" +  date  + "_" + heure in x]
print list

est juste, simplement plus haut tu dis que tu veux pouvoir avoir une liste de tous les fichier d'une date précise, ici dans ton code tu obtiens tous les fichiers d'une date, heure et lieu précis, apparemment ce que tu voudrais réellement, c'est obtenir une liste de tous les fichier d'une date et lieu précis unquement, peu importe l'heure, auquel cas:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
lieu="TB1519"
date = datetime.date.today().strftime("%d%m%Y")
 
list=[x for x in os.listdir("repertoire de recherche") if lieu + "_" +  date in x]
print list

suffit amplement

EDIT:

Je suis curieux de savoir qui va le plus vite : filter(fonction, liste) ou [x for x in liste if fonction(x) ] ??

La comprehension list est presque deux fois plus rapide, j'ai d'ailleurs cru lire quelque part sur le forum que dans dans une version future (la 3? la 2.6?) filter allait être retiré, ou en tout cas qu'ils y pensaient

[yacinechaouche]

Oui ça existe, c'est le vide.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
 
lieu="TB1519"
date = datetime.date.today().strftime("%d%m%Y")
 
list=[x for x in os.listdir("repertoire de recherche") if lieu + "_" +  date in x]
print list

[yacinechaouche]

J'étais curieux de tester les performances de filter pour faire le même boulot :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
 
import os
files = os.listdir(".") 
filter(lambda x: "h" in x,files)

Ce code tourne presque 2 fois plus lentement que le code équivalent en liste de compréhension ! la raison est simple : un appel de fonction (même sous lambda-form) est beaucoup plus couteux qu'un simple if !

A mon avis, filter ne devrait être utilisé que sa la fonction de filtre est vraiment compliqué à écrire.

Je suis curieux de savoir qui va le plus vite : filter(fonction, liste) ou [x for x in liste if fonction(x) ] ??

And ze viner iz : filter ! avec 20% de temps en moins

[defcom60]

Pourquoi faire compliquer qaund on peut faire simple.

[N.tox]

And ze viner iz : filter ! avec 20% de temps en moins

Bizarre...

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
>>> timeit.Timer('''a=['h','b']
[x for x in a if 'h' in x]''').timeit()
0.68851436757040529
 
>>> timeit.Timer('''a=['h','b']
filter(lambda x:'h' in x,a)''').timeit()
1.1829808857389281

Chez moi, c'est l'inverse, la comprehension list est presque deux fois plus rapide ...

C'est peu-être du à l'architecture processeur, j'ai un core2 duo, 2Go de ram, et toi?

[defcom60]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
 
lieu="TB1519"
date = datetime.date.today().strftime("%d%m%Y")
 
list=[x for x in os.listdir("repertoire de recherche") if lieu + "_" +  date in x]
print list

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
 
open("FILES/sortie.txt","w").write("".join([chaine for chaine in file(list).xreadlines() if chaine.strip() and chaine.split()[3] == 'nvoSpaceTemp' and not 18 < float(chaine.split()[4]) < 27]))

je cherche comment faire pour imbriquer c"est deux fonctions.

dans le premiers je liste tous les fichiers puis les ouvre avec la deuxieme mais il y a comment un hic.

[N.tox]

Il doit sûrement être possible de les regrouper en une seule, mais je ne me pencherais pas sur la question, autant faire simple. Qui plus est, il faut bien identifier ton besoin, à savoir, veux-tu collecter toutes les lignes contenant les températures (18<x<27) de tous les fichiers de la liste et enregistrer le tout dans un fichier, ou bien veux-tu parcourir un fichier de la liste, collecter les lignes des températures, enregistrer le résultat dans un fichier, puis ouvrir un autre fichier, collecter les lignes, puis enregistrer le résultat dans un autre fichier etc etc... ?

[defcom60]

bonjour,

Dans un premier temps je veut collecter toutes les lignes de chaque fichier dans une liste puis apres filtre les températures ou autre recherche par exemple collecter tous les CLVCPTA15001 nvoSpaceTemp quelque soit l'heure de l'enregistrement.

merci

[defcom60]

pour ce qui est du trie par CLVCPTA15001 c'est fait

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
 
entree="MONFICHIER.csv"
open("sortie.txt","w").write("".join([chaine for chaine in file(entree).xreadlines() if chaine.strip() and chaine.split()[2] == "CLVCPTA15001"]))

[yacinechaouche]

Salut,

N.tox, je t'invite à relire le message #29 dans lequel j'explique que
filter(lambda, liste) est presque 2 fois plus lent que [x for x in list if condition].

La question que je me posait était de savoir si filter(fonction,liste) était plus rapide que [x for x in list if fonction], et dans ce cas là, c'est filter qui est environ 20% plus rapide.

Je t'invite à tester ce code chez toi pour t'en assurer :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
 
import os,timeit
files = os.listdir(".")
 
def prendre(nomFichier):
    return "h" in nomFichier
def methode1():
    [x for x in files if prendre(x)]
def methode2():
    filter(prendre,files)
 
 
print timeit.Timer("methode1()","from __main__ import methode1,files,prendre").timeit(10000)
print timeit.Timer("methode2()","from __main__ import methode2,files,prendre").timeit(10000)

Voici ce que ça imprime chez moi

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
 
0.292948961258
0.226117134094

Donc, encore une fois, selon moi :
* Préférer les CL si la condition à tester est simple, comme dans notre cas (if X in Y).
* Préférer filter si la condition à tester est trop complexe et demande à écrire une fonction exprès.

J'espère avoir clarifié un peu plus mon précédent post.

[N.tox]

La question que je me posait était de savoir si filter(fonction,liste) était plus rapide que [x for x in list if fonction], et dans ce cas là, c'est filter qui est environ 20% plus rapide.

Ahhhhh... En effet, j'avais mal compris

Defcom, ce que je voulais dire c'est (je sais pas trop comment expliquer ça) est-ce que ce que tu veux faire c'est

reponse A :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
1) appliquer un filtre sur le nom de fichiers du dossier pour avoir une liste (files) de seulement certains fichier


2.a) Appliquer un filtre sur le premier fichier de cette liste (files) pour récupérer toutes les ligne contenant les températures x<18 x>27 dans une liste (temp)

3.a) Enregistrer les élément de la liste (temp) dans un fichier temp_1


2.b) Appliquer un filtre sur le deuxième fichier de la liste (files) pour récupérer toutes les ligne contenant les températures  x<18 x>27 dans une liste (temp)

3.b) Enregistrer les élément de la liste (temp) dans un fichier temp_2

...

réponse B

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
1) appliquer un filtre sur le nom de fichiers du dossier pour avoir une liste (files) de seulement certains fichier

2)créer un liste vide temp

2) Appliquer un filtre sur le 1er fichier de cette liste (files) pour ajouter toutes les ligne contenant les températures x<18 x>27 dans la liste (temp)

3) Appliquer un filtre sur le 2ème fichier de cette liste (files) pour ajouter toutes les ligne contenant les températures x<18 x>27 dans la liste (temp)

4)...

5) Appliquer un filtre sur le Dernier fichier de cette liste (files) pour ajouter toutes les ligne contenant les températures x<18 x>27 dans la liste (temp)

6) Enregistrer les élément de la liste (temp) dans un fichier temp_18_27

[defcom60]

Bonjour,

ma reponse est la B) c'est mon dernier mot.