Génération d'une matrice dans un fichier csv

Bonjour,
j'ai implémenté un algorithme génétique et je veux maintenant afficher les résultats dans des courbes.
j'ai simulé l'algorithme 10 runs, j'ai obtenu donc 10 fichiers textes. Chaque fichier texte contient un seul colonne : best_fitness au cours de 100 génerations
Le contenu de fichier texte est comme ça:

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15

0.71348 0.62952 0.50388 0.50388 0.47668 0.36208 0.32 0.31428 0.27212 0.223 0.223 0.223 0.223 0.21432 ....

---

Maintenant, je veux concaténer ces fichiers texte dans un fichier résultat csv : le fichier résultat normalement est une matrice de 100 lignes
(nombre de générations) et 10 colonnes (10 runs).
j'ai essayé de faire ça en utilisant le module pandas :

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22

import os import pandas as pd   # Les fichiers résultats soient dans un même dossier # On liste tous les fichiers avec l'extension '.txt'. path = r'mon\dossier' results_files = [f for f in os.listdir(path) if f.endswith('.txt')]   # On ouvre et lit les fichiers. On les transforme en tableau et on les stock # dans une liste avant de les concaténer en un seul et unique tableau. # Pour pandas un tableau est un "DataFrame", d'où le "df". list_df = [] for f in results_files: df = pd.read_table(path + '\\' + f, index_col=None, header=0) # On en profite pour nommer la colonne de données df = df.rename(columns={'1': f}) list_df.append(df) results = pd.concat(list_df)   # On sauve le tableau complet sous la forme souhaitée (un csv ou même # un fichier excel) results.to_csv( path + '\\' + 'results.csv', sep='\t', index=False)

---

Mais, malheureusement je n'ai pas généré la matrice voulue dans un fichier csv ; les fichiers sont concaténés dans une seule colonne.
S'il vous plait, pouvez vous m'aider .
Merci d'avance

Salut,

Deux conseils, d'abord divise ton code en fonctions distinctes, à l'usage tu verras comme ça facilite la vie.

Ensuite, commence par les solutions simples proposées par Python, par exemple ceci:

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20

import glob import csv   def get_files(): return glob.glob(r'mon\dossier\*.txt')   def get_values(fname): with open(fname, 'r') as inf: return inf.readlines()   mat = [[] for i in range(100)] for file_ in get_files(): for idx, value in enumerate(get_values(file_)): mat[idx].append(value.strip())   with open('mat.csv', 'w', newline='\n') as csvfile: matwriter = csv.writer(csvfile, delimiter='\t') for row in mat: matwriter.writerow(row)

---

Plus tard, si tu as vraiment la nécessité de Panda, il sera toujours temps d'apprendre à s'en servir.

Citation:

---

Envoyé par VinsS

Salut,

Deux conseils, d'abord divise ton code en fonctions distinctes, à l'usage tu verras comme ça facilite la vie.

Ensuite, commence par les solutions simples proposées par Python, par exemple ceci:

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20

import glob import csv   def get_files(): return glob.glob(r'mon\dossier\*.txt')   def get_values(fname): with open(fname, 'r') as inf: return inf.readlines()   mat = [[] for i in range(100)] for file_ in get_files(): for idx, value in enumerate(get_values(file_)): mat[idx].append(value.strip())   with open('mat.csv', 'w', newline='\n') as csvfile: matwriter = csv.writer(csvfile, delimiter='\t') for row in mat: matwriter.writerow(row)

---

Plus tard, si tu as vraiment la nécessité de Panda, il sera toujours temps d'apprendre à s'en servir.

---

Merci beaucoup pour votre réponse.
Mais j'ai l'erreur suivant :

Code:

---

TypeError: 'newline' is an invalid keyword argument for this function

---

et lorsque je supprime le champ newline, le code marche mais le résultat n'est parfaite ; on saute à chaque fois une ligne et il n'y a pas des espaces entre les valeurs . En piéce-jointe un imprime écran de quelques lignes de fichier mat.csv.
Merci d'avance pour votre tempsPièce jointe 226701

Oui, tu peux supprimer newline.

Je l'ai testé avec 4 fichiers reprenant les dix premières valeurs de ton exemple. Les quatre fichiers sont identiques, donc.

J'obtiens ceci:

Code:

---

1 2 3 4 5 6 7 8 9 10 11

0.71348 0.71348 0.71348 0.71348 0.62952 0.62952 0.62952 0.62952 0.50388 0.50388 0.50388 0.50388 0.50388 0.50388 0.50388 0.50388 0.47668 0.47668 0.47668 0.47668 0.36208 0.36208 0.36208 0.36208 0.32 0.32 0.32 0.32 0.31428 0.31428 0.31428 0.31428 0.27212 0.27212 0.27212 0.27212 0.223 0.223 0.223 0.223

---

Chaque colonne est un fichier, si j'ai bien compris ta question.

Tu peux remplacer la tabulation par un autre caractère bien sur.

Testé avec Python 2 et 3

Citation:

---

Envoyé par VinsS

Oui, tu peux supprimer newline.

Je l'ai testé avec 4 fichiers reprenant les dix premières valeurs de ton exemple. Les quatre fichiers sont identiques, donc.

J'obtiens ceci:

Code:

---

1 2 3 4 5 6 7 8 9 10 11

0.71348 0.71348 0.71348 0.71348 0.62952 0.62952 0.62952 0.62952 0.50388 0.50388 0.50388 0.50388 0.50388 0.50388 0.50388 0.50388 0.47668 0.47668 0.47668 0.47668 0.36208 0.36208 0.36208 0.36208 0.32 0.32 0.32 0.32 0.31428 0.31428 0.31428 0.31428 0.27212 0.27212 0.27212 0.27212 0.223 0.223 0.223 0.223

---

Chaque colonne est un fichier, si j'ai bien compris ta question.

Tu peux remplacer la tabulation par un autre caractère bien sur.

Testé avec Python 2 et 3

---

Oui merci, vous avez bien compris ma question.
Merci beaucoup , mon problème est résolu.