Importer txt pour numpy

Version imprimable

29/03/2011, 09h57
cm34lab

Importer txt pour numpy
Bonjour, je souhaite importer un fichier txt qui a le format suivant :
Code:

1 2 3 18/03/2011 12:39:18 MA 20,0 50,0 19,7 53,1 18/03/2011 12:39:19 MA 20,0 50,0 19,7 53,1 18/03/2011 12:39:20 MA 20,0 50,0 19,7 53,3
La commande data=csv.reader(open(file, 'rb'), delimiter=' ') ne renvoi pas d'erreur, mais je n'arrive pas à accéder au contenu. L'objectif étant de pouvoir tracer ces données avec matplotlib et faire des calculs avec numpy.

Pouvez vous m'aider ?

Merci
29/03/2011, 12h50
tyrtamos
Bonjour,

Si la ligne est aussi simple que ça, un simple .split devrait faire l'affaire:
Code:

1 2 3 4 x = "18/03/2011 12:39:18 MA 20,0 50,0 19,7 53,1" print x.split(' ') ['18/03/2011', '12:39:18', 'MA', '20,0', '50,0', '19,7', '53,1']
Bien entendu, tous les éléments sont des chaines de caractères. Pour accéder aux nombres flottants, il faudra d'abord remplacer la virgule par un point décimal.

Tyrtamos
26/04/2011, 09h12
cm34lab

Conversion string avec ',' en float

Comment peux t-on convertir les dernières valeur en float une fois ce split exécuté ? (Je souhaite éviter les boucles car les fichiers sont très long, ce qui engendrerai de long temps de calcul).
Merci.

Salut,

Par un simple cast
Code:

1 2 3 text = "123.456" value = float(text) print type(value), value

26/04/2011, 09h21
cm34lab

Les valeurs en string sont de la forme '50,9' stockées dans un array (array(['50,9', '50,0', '49,9', ..., '91,9', '91,9', '91,9'],dtype='|S19'))...

Code:

1
2
3
4
5
6
7
data = ['18/03/2011', '12:39:18', 'MA', '20,0', '50,0', '19,7', '53,1']
for word in data:
    try:
        value = float(word.replace(',', '.'))
    except:
        value = word
    print type(value), value

26/04/2011, 23h41
cm34lab

1 pièce(s) jointe(s)

Pour revenir à mon problème initial = lire un fichier txt (de plus de 16000 lignes) (cf. exemple réduit joint), je fais :

Code:

data_env = list(csv.reader(open(ftp_env_file, 'rU'), delimiter='\t'));

Si j'affiche les 2 premières lignes de cette liste, j'ai mes valeurs :
>>data_env[0:2]

[['22/04/2011 12:03:12', 'MA', '23,0', '50,0', '23,1', '50,9'], ['22/04/2011 12:03:33', 'MA', '23,0', '50,0', '22,9', '50,0']]

Ce que je souhaite, c'est créer des vecteurs colonnes contenant les dates, info texte, chiffres en float (pour utiliser les outils numpy et matplotlib)...

Bonjour,

Voilà ce que je peux proposer:

A partie de la liste de chaine donnée:

Code:

1
2
3
4
5
6
L = ['22/04/2011', '12:03:12', 'MA', '23,0', '50,0', '23,1', '50,9']
 
R = [' '.join(L[0:2])] + [L[2]] + [float(elem.replace(',','.')) for elem in L[3:]]
 
print R
['22/04/2011 12:03:12', 'MA', 23.0, 50.0, 23.1, 50.9]

Tyrtamos

Super... mon souci est presque résolu. J'ai essayer de boucler sur les lignes pour en extraire les colonnes, mais je n'arrive pas à les stocker...
Je fais :
Code:

1 2 3 data_env = list(csv.reader(open(ftp_env_file, 'rU'), delimiter='\t'));#Lecture du fichier d'environment for line in data_env: Env = [' '.join(line[0:1])] + [line[1]] + [float(elem.replace(',','.')) for elem in line[2:]]
Mais je ne récupère qu'une seule ligne ...!

Python est un super langage mais j'ai le sentiment qu'il faut avoir un besoin bien poussé pour dépasser les possibilités d'excel (où l'import de fichier texte est simplissime)...:-)

Non, ça marche:

Code:

1
2
3
4
5
6
7
8
9
10
11
12
import csv
 
ftp_env_file = "le_fichier.csv"
data_env = list(csv.reader(open(ftp_env_file, 'rU'), delimiter='\t'));#Lecture du fichier d'environment
 
R = []
for line in data_env:
    Env = line[0:2] + [float(elem.replace(',','.')) for elem in line[2:]]
    R.append(Env)
 
print R    
[['22/04/2011 12:03:12', 'MA', 23.0, 50.0, 23.1, 50.9], ['22/04/2011 12:03:33', 'MA', 23.0, 50.0, 22.9, 50.0], ['22/04/2011 12:03:53', 'MA', 23.0, 50.0, 22.8, 49.9], ['22/04/2011 12:04:13', 'MA', 23.0, 50.0, 22.8, 50.1], ['22/04/2011 12:04:33', 'MA', 23.0, 50.0, 22.9, 50.4], ['22/04/2011 12:04:54', 'MA', 23.0, 50.0, 23.0, 51.4], ['22/04/2011 12:05:14', 'MA', 23.0, 50.0, 23.2, 51.9]]

On obtient une liste de listes, chaque sous-liste représentant une ligne.

Tyrtamos

03/05/2011, 10h43
cm34lab
Super. Donc je résumé pour indiquer ce post en résolu.

Je souhaite importer un fichier texte nommé filetoimport au format suivant :
29/04/2011 09:39:01 MA 23,0 40,0 21,8 100,0
29/04/2011 09:39:02 MA 23,0 40,0 21,8 100,0
29/04/2011 09:40:08 MA 23,0 40,0 21,7 100,0

Je créé une liste contenant un liste de chaque ligne :
Code:

1 2 3 import csv data_env = list(csv.reader(open(filetoimport, 'rU'), delimiter='\t'));
Puis je converti les valeurs numériques en float :
Code:

1 2 3 4 Env = [] for line_env in data_env: R_env = line_env[0:2] + [float(elem.replace(',','.')) for elem in line_env[2:]] Env.append(R_env)
Et enfin je converti cette liste en array :
Code:

1 2 import numpy as np env=np.array(Env);
Merci à tous de vos réponses.