Au sujet de la lecture/écriture dans un fichier excel

Version imprimable

16/06/2015, 10h49
olivier.breheret

Au sujet de la lecture/écriture dans un fichier excel

Bonjour à tous,

J'ai 2 questions concernant le traitement de données dans Excel

Je travaille sur des feuilles excel avec xlrd et xlwt et je rencontre quelques problèmes pour faire ce que je veux:

1°/ je n'arrive pas à remplacer une valeur dans une cellule : par exemple si j'ai 1 en A1 et que je veux écrire 2 à la place, j'ai un message d'erreur de type "attempt to overwrite"

2°/ Je voudrais ouvrir le fichier excel pour faire des travaux de lecture ET d'écriture sur une feuille dans la même boucle mais je n'ai pas trouver de fonction le permettant. A l'heure actuelle je suis obligé de fermer le fichier à chaque fois que je veux le consulter avec xlrd et le rouvrir pour écrire (open(fichier,"a").

Avez-vous des pistes, des solutions ou des astuces concernant ces deux points?

merci d'avance

ob
16/06/2015, 15h10
marco056

Citation:

Envoyé par olivier.breheret

Bonjour à tous,

J'ai 2 questions concernant le traitement de données dans Excel

Je travaille sur des feuilles excel avec xlrd et xlwt et je rencontre quelques problèmes pour faire ce que je veux:

1°/ je n'arrive pas à remplacer une valeur dans une cellule : par exemple si j'ai 1 en A1 et que je veux écrire 2 à la place, j'ai un message d'erreur de type "attempt to overwrite"

2°/ Je voudrais ouvrir le fichier excel pour faire des travaux de lecture ET d'écriture sur une feuille dans la même boucle mais je n'ai pas trouver de fonction le permettant. A l'heure actuelle je suis obligé de fermer le fichier à chaque fois que je veux le consulter avec xlrd et le rouvrir pour écrire (open(fichier,"a").

Avez-vous des pistes, des solutions ou des astuces concernant ces deux points?

merci d'avance

ob

J'utilise plutôt des fichiers csv (cela évite les 2 modules) et à chaque fois que j'ai voulu les modifier, j'ai créé des listes et réécrit le fichier avec les options adéquates.
16/06/2015, 16h45
olivier.breheret

OK Marco056

Et le fait de travailler sur des fichiers csv permettrait la lecture Et l'écriture dans la même "session" d'ouverture du fichier? et l'overwrite?
16/06/2015, 17h31
marco056

Il y a pas mal d'exemples.
Voici la doc :
https://docs.python.org/3.0/library/csv.html
16/06/2015, 20h59
olivier.breheret

merci

J'ai pas testé mais j'ai bien l'impression à la lecture de la doc que l'on ne peur que SOIT ecrire SOIT lire mais pas les 2 en simultané.
va falloir tester un peu ......
de + la doc est pour python 3.x je suis en 2.7

en tous cas, merci

olivier
16/06/2015, 21h14
marco056

csv existe aussi pour python 2.7 : il y a d'ailleurs plus d'exemples sur le net.
Pour ce qui est de la réécriture, je suis toujours passé par un "tampon" effectivement.
16/06/2015, 22h36
olivier.breheret

ouais bah c'est bien ça mon problème... être obligé d'ouvrir et de fermer des fichiers sans arrêt à l'intérieur d'une boucle pour, soit les lire, soit les écrire, fait que sur de gros fichiers les temps de traitement deviennent rédhibitoires.
Je ne sais vraiment plus comment y remédier.....

Bonne soirée et avis à la population : help me

olivier
16/06/2015, 23h15
marco056

Explique peut-être plus en détail.
J'ai travaillé sur de gros fichiers csv mais le traitement se faisait sur les listes une fois les fichiers ouverts.
A la fin, une fois le traitement terminé, on réécrit le fichier.
17/06/2015, 12h18
olivier.breheret

En fait je lis des données dans un fichier source.
Je construis une pseudo BDD dans un autre fichier.
A chaque fois que je lis une donnée, je teste le fichier "BDD" pour savoir si la donnée est déjà présente (LECTURE du fichier BDD)
Si oui -> un compteur s'incrémente pour cette donnée (ECRITURE du fichier BDD)
Si non -> ajout de la donnée au fichier BDD (ECRITURE du fichier BDD)
Ceci en boucle sur 20 à 30 000 lignes

Comme je n'arrive pas à lire et écrire sur la même ouverture du fichier BDD je suis à chaque fois obligé d'ouvrir/fermer ledit fichier càd 20 à 30 000 fois dans le script : j'ouvre le fichier pour écrire, je ferme le fichier pour pouvoir le lire à nouveau etc...

Temps d'exécution +++++

surtout que je dois faire la manoeuvre pour 13 types de données (13 colonnes)
17/06/2015, 12h41
marco056

Citation:

Envoyé par olivier.breheret

En fait je lis des données dans un fichier source.
Je construis une pseudo BDD dans un autre fichier.
A chaque fois que je lis une donnée, je teste le fichier "BDD" pour savoir si la donnée est déjà présente (LECTURE du fichier BDD)
Si oui -> un compteur s'incrémente pour cette donnée (ECRITURE du fichier BDD)
Si non -> ajout de la donnée au fichier BDD (ECRITURE du fichier BDD)
Ceci en boucle sur 20 à 30 000 lignes

Comme je n'arrive pas à lire et écrire sur la même ouverture du fichier BDD je suis à chaque fois obligé d'ouvrir/fermer ledit fichier càd 20 à 30 000 fois dans le script : j'ouvre le fichier pour écrire, je ferme le fichier pour pouvoir le lire à nouveau etc...

Temps d'exécution +++++

surtout que je dois faire la manoeuvre pour 13 types de données (13 colonnes)

C'est à mon avis le traitement qui est à revoir : une fois le fichier ouvert, on traite puis on referme. Point.

C'est justement tout le fond de mon problème.... je souhaiterais effectivement ouvrir le fichier pour le traiter et le refermer à la fin. Mais je n'arrive pas à lire et écrire dans ce fichier sur la même ouverture.
Je te mets un extrait de mon code...
Peut-être pourras-tu me dire où est le schmilblick...

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
# recherche Bdd Unité (LibelleUf) (2ème colonne de la feuille 2)
		# Ouverture du fichier pour consultation
		FichierBdd = xlrd.open_workbook(fichierEcriture) 
		# Récupération de la feuille Bdd
		feuil2_2 = FichierBdd.sheet_by_name("feuil2")
		for index in range(1,200):
			BddUnite = format(feuil2_2.cell_value(index,1))
			open(fichierEcriture, "a") # Ouverture du fichier en mode ajout
			if LibelleUf == BddUnite: # Le libellé Uf existe déjà dans la BDD
				Rech_Bdd_Unite = index
				break
			else:
				if BddUnite == "": # Le libellé Uf n'existe pas : on l'ajoute à la BDD
					feuil2.write(index,1,LibelleUf)
					cptUnite+=1 # permet de compter le nombre d'occurences dans la BDD
#					feuil2.write(0,1,str(cptUnite)) # Génère une erreur "overwrite" à chaque fois qu'on cherche à écrire ==> transféré à la fin de la boucle
					Rech_Bdd_Unite = index
					break
		feuil3.write(k+1,2,str(Rech_Bdd_Unite))
		classeur.save(fichierEcriture) # Sauvegarde et fermeture du fichier écriture

17/06/2015, 15h41
marco056

Aurais-tu un extrait de ton fichier excel ?
Une première remarque : je ne pense pas que csv gère les différentes feuilles...
17/06/2015, 16h06
olivier.breheret

1 pièce(s) jointe(s)

ci-joint le fichier xls

J'ai du mal à comprendre ce que tu souhaites vraiment faire avec cela mais voici un petit programme vite fait.
J'ai enregistré la première feuille de ton fichier excel en format csv sous le nom essai-csv1 avec la tabulation comme séparateur.
J'ai effectué un petit traitement qui est tout simple pour donner un exemple.
J'ai réécrit le fichier obtenu sous le nom essai-csv2.
On peut bien sûr ouvrir plusieurs fichiers csv en même temps.
En espérant que cela t'aide...
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 # -*- coding: utf-8 -*- import csv with open("essai-csv1.csv") as mon_fichier: global liste liste = list(csv.reader((mon_fichier),dialect='excel',delimiter='\t',lineterminator=' ')) print(liste) fichier_cible = open("essai-csv2.csv", "w") sortie_w = csv.writer(fichier_cible) cpt = 0 for ligne in liste: if "_NEUROCHIR ADULT" in ligne[1]: cpt+=1 print(ligne) sortie_w.writerow(ligne) fichier_cible.close() print(cpt)

18/06/2015, 23h59
marco056

Si c'est résolu, ce serait bien de l'indiquer...
19/06/2015, 08h23
olivier.breheret

ça n'est pas résolu sinon je l'aurai indiqué....
Je veux lire Et écrire dans le même fichier donc non résolu pour l'instant
19/06/2015, 10h10
wiztricks

Salut,

Citation:

Envoyé par olivier.breheret

ça n'est pas résolu sinon je l'aurai indiqué....
Je veux lire Et écrire dans le même fichier donc non résolu pour l'instant

Pour lire et écrire dans le même fichier, vous pouvez regarder (par exemple) des bibliothèques comme pywin32. Elle permet de travailler directement depuis Python avec excel.
Vous avez plein d'exemples et tutoriels qui traînent sur le web comme par exemple celui ci.
Et une documentation intéressante chez Microsoft.

Vous pouvez aussi regarder l'équivalent LibreOffice qui peut aussi se programmer.

- W
19/06/2015, 17h45
marco056

Citation:

Envoyé par olivier.breheret

ça n'est pas résolu sinon je l'aurai indiqué....
Je veux lire Et écrire dans le même fichier donc non résolu pour l'instant

Ok, désolé.
Rien n'empêche de lire, traiter et réécrire le fichier avec le même nom, ce qui revient au même, le temps en plus. Sur une machine performante, cela peut être assez rapide.