Programme moulinette pour réorganisation tableau 2 dimensions

Version imprimable

27/06/2013, 13h08
quentin31000

Programme moulinette pour réorganisation tableau 2 dimensions

Bonjour à tous,

actuellement en stage, je suis chargé de réécrire des tableaux dans un nouveau format. Je m'explique, j'ai un fichier .dat avec N tableau sous la forme 57 lignes 1 colonne. Je dois le réécrire sous la forme 12 lignes 5 colonnes dans un fichier txt.

je vous montre le format d'entrée que j'ai :

$ FLUX sur ELEMENT 35161
$
TABTYPE 1001 QNODE
TABDATA 1001 0.5964697240E+00
TABDATA 1001 0.5964697240E+00
...
TABDATA 1001 0.5964697240E+00
TABDATA 1001 0.5964639666E+00
TABDATA 1001 0.5763934882E+00

en gras, ce sont les élément que je dois récupérer. Le format d'arrivée doit ressembler à ça :

N00035161 ( 86) =
2.4666E-04, 8.2601E-05, 1.4505E-04, 3.7443E-04, 7.1601E-04,
5.8408E-04, 2.6607E-04, 2.9567E-04, 3.3031E-04, 3.8585E-04,
3.8574E-04, 6.0393E-04, 3.7377E-04, 6.6185E-04, 4.4502E-04,

ici en gras, j'ai mis le nom du tableau qui doit correspondre avec le n° de l'élément.

On m'a conseillé de faire ça à l'aide d'une moulinette. Or ayant peu de notions en langage info (uniquement JAVA et depuis peu Python), je me retrouve bloqué sur la méthode à utiliser. Je pense utiliser des for in pour parcourir les tableaux mais j'avoue être pas mal dans le flou.

Si jamais l'un de vous à des pistes à me conseiller ou des exemples de moulinettes, je suis preneur.

Merci, a plus.
27/06/2013, 13h38
6ril23

Tu peux faire un truc du genre:

- ouverture fichier .dat
- lecture du fichier et récupération des informations sous forme de dictionnaire dont la clé est le numéro de l'élément (ici: 35161) et la valeur est une liste des numéros (ex lecture par ligne (readline) et traitement de la ligne avec une expression régulière)
dico={"35161": [0.5964697240E+00, 0.5964697240E+00...], "XXXX": []...}
-fermer fichier

- ouvrir le fichier de sortie .txt
- pour chaque clé du dico, tu print les infos avec ou sans traitement (ex: 35161 -> N00035161; (86) doit être ton nombre de num scientifique pour l'élément...)
- fermer fichier

voilà la manière de procéder que j'utiliserais
si besoin mets les problèmes que tu rencontres
27/06/2013, 13h56
quentin31000

Merci pour ta réponse

là où je n'arrive pas à voir clair c'est pour la récupération des infos, le programme va-t-il détecter automatiquement les n° des tableaux ainsi que les valeurs de chaque ligne que j'ai en entrée? Si non comment faire ?

Il y a qqc comme 9000 tableaux à traiter et ils ne sont pas rangés de façon logique.

pour la récupération:
Code:

1 2 3 4 5 6 7 8 9 10 11 fichier = open("/mon/fichier.dat", "r") for ligne in fichier: if re.match('$ FLUX sur ELEMENT 35161'): # si ta ligne est une ligne de déclaration d'élément ligne_split = ligne.split(" ") # récupération du dernier élément après découpage par espace element = ligne_split[-1] dico[element] = [] #creation de la clé et de sa valeur (liste vide) elif re.match('TABDATA'): # si ta ligne est une ligne de résultat ligne_split = ligne.split(" ") valeur = ligne_split[-1] dico[element].append() # insertion du num scientifique dans la liste fichier.close()
il est sûrement possible d'améliorer le code mais ça doit fonctionner ou au moins te donner une idée
(code pas testé)

Edit: je viens de voir que tu dis avoir 9000 éléments à traiter, alors tu peux peut être intégrer l'écriture dans le fichier de sortie à ce bout de code (ça t'évitera de parcourir le tableau final) et donc passer seulement par une liste et non pas un dictionnaire

27/06/2013, 16h16
Julien N
Salut,

Citation:

récupération des informations sous forme de dictionnaire

Je plussoie.

Il manque quelque chose cela dit dans le code proposé:

Code:

dico[element].append(valeur)

Une fois le dictionnaire créé, il suffit d'itérer sur les clés et valeurs pour le traiter:
Code:

1 2 3 for key,value in dico.items(): # je fais plein de choses comme afficher les cles print key
Par contre je n'utiliserais pas les expressions régulières pour ma part. Je me contenterais de faire des tests sur les splits de mes lignes.

Ju
27/06/2013, 19h39
Sve@r
Citation:
Envoyé par Julien N

Code:

1 2 3 for key,value in dico.items(): # je fais plein de choses comme afficher les cles print key
Salut
Je pencherais plutôt pour cette solution
Code:

1 2 3 for key, value in dico.iteritems(): # je fais plein de choses comme afficher les cles print key
En effet, items() génère la liste entière en mémoire avant de la renvoyer au for pour qu'elle soit traitée. Alors que iteritems() renvoie un simple générateur lequel ensuite, renverra les éléments un à uns à la demande.

Ainsi, Python n'a pas besoin de réserver une place immense en mémoire pour y ranger ses éléments...
28/06/2013, 09h34
Julien N

Code:

Alors que iteritems() renvoie un simple générateur

Merci beaucoup Sve@r! :ccool:

Ju

Merci à tous pour vos réponses.

Je me demandais si ça n'était pas plus facile de faire via des listes ?

Et aussi, pour écrire le nouveau fichier .txt je peux directement l'écrire en insérant les bonnes lignes de codes directement dans la boucle for in non ?

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
fichier = open("/mon/fichier.dat", "r")
fichier_sortie = open("/mon/fichier.txt", "w")
 
for ligne in fichier:
	if re.match('$ FLUX sur ELEMENT 35161'):			# si ta ligne est une ligne de déclaration d'élément 
		ligne_split   = ligne.split(" ")			# récupération du dernier élément après découpage par espace
		element       = ligne_split[-1]
		dico[element] = []					#creation de la clé et de sa valeur (liste vide)
                fichier_sortie.write(dico[element])     #coder ici pour écrire directement dans le nouveau fichier .txt
	elif re.match('TABDATA'):					# si ta ligne est une ligne de résultat
		ligne_split = ligne.split(" ")
		valeur      = ligne_split[-1]
		dico[element].append()					# insertion du num scientifique dans la liste
                fichier_sortie.write(dico[element])     #écriture du num scientifique dans le nouveau fichier
 
 
fichier.close()
fichier_sortie.close

Ca pourrait être un truc comme ça non ?

Merci encore.

Citation:

Envoyé par quentin31000

Ca pourrait être un truc comme ça non ?

si tu veux écrire directement dans le fichier de sortie ne passe pas par le dictionnaire
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 fichier = open("/mon/fichier.dat", "r") fichier_sortie = open("/mon/fichier.txt", "w") for ligne in fichier: if re.match('$ FLUX sur ELEMENT 35161'): # si ta ligne est une ligne de déclaration d'élément ligne_split = ligne.split(" ") # récupération du dernier élément après découpage par espace element = ligne_split[-1] fichier_sortie.write("N000".element.":\n") #coder ici pour écrire directement dans le nouveau fichier .txt elif re.match('TABDATA'): # si ta ligne est une ligne de résultat ligne_split = ligne.split(" ") valeur = ligne_split[-1] fichier_sortie.write(valeur."\n") #écriture du num scientifique dans le nouveau fichier fichier.close() fichier_sortie.close
Par contre, tu vas alourdir ton code pour le traitement des données et la mise en page du fichier de sortie et sur ton exemple de sortie tu voulais le nombre de valeur par élément ("N00035161 ( 86) =") ce qui ne sera pas possible sans passer par le dictionnaire