Openpyxl - Copie de données vers un WorkBook MemoryError

Bonjour @ tous.

Difficile de tous mettre dans le sujet alors je vous explique.

J'ai créé un python, l'objectif étant de copier l'onglet d'un fichier ".xls" vers un fichier fraîchement créé en ".xlsx".

Je suis donc initialement parti sur une boucle de type

Code:

---

1 2 3 4 5

for row in range(0,nrows): for col in range(0,ncols): ws.cell(row=row+1, column=col+1).value = sheet.cell_value(row, col)   wb.save('nouveau_fichier.xlsx')

---

Jusque là aucun souci, tout fonctionnait à merveille jusqu'à ce qu'un fichier source, un peu lourd passe par là et me renvoi à la tête un message du genre : MemoryError

J'ai donc décidé d'utiliser une méthode plus "light" en utilisant celle préconisée sur la doc officiel qui indique qu'il faut utiliser le paramètre write_only=True.

J'ai donc modifié mon code en recopiant à l'identique celui de la documentation :

Code:

---

1 2 3 4

for row in range(nrows): ws.append(['%d' % i for i in range(ncols)])   wb.save('nouveau_fichier.xlsx')

---

Alors là, le résultat est...comment dire... surprenant puisqu'il indique dans chaque cellule destination un numéro correspondant au numéro de colonne et ce, sur chaque ligne :

0 1 2 3 4 5 6
0 1 2 3 4 5 6
...

J'imagine donc que c'est le paramètre '%d' qui ne colle pas mais là impossible de trouver ce qu'il est possible de faire au niveau des propriétés de ws.append, je ne trouve aucune information.

Pourriez-vous me donner un coup de main s'il vous plait ?

Par avance merci :).

Geo-x

Salut,

Citation:

---

Envoyé par Geo-x

Code:

---

1 2	for row in range(nrows): ws.append(['%d' % i for i in range(ncols)])

---

---

Si vous essayez cette ligne directement dans une console vous aurez le même résultat (en remplaçant ncols par 10):

Code:

---

print(['%d' % i for i in range(10)])

---

Vous demandez de créer une liste contenant i pour chaque i de 0 au nombre de colonnes-1. %d sert juste à formater comme chaine de caractères. Avec '%0.4f' vous auriez le résultat suivant:

Code:

---

>>> ['0.0000', '0.0001', '0.0002', ...]

---

Je ne vois pas le lien avec l'erreur de mémoire ou le "write_only=True".

J

Bonjour Julien, et merci pour ces précisions !

Le lien qu'il semble y avoir si je suis la doc, c'est que dans le cas d'une mémoire insuffisante, il est nécessaire de favoriser les paramètres "write_only=True" ou "read_only=True".

Dans le cas de l'utilisation de ces derniers, la documentation utilise systématiquement la fonction ws.append (...)

Maintenant, la question que je me pose, c'est comment je peux faire pour récupérer les valeurs de chaque ligne, puisque dans cet exemple je n'agis plus au niveau de chaque cellule, mais bien au niveau de chaque ligne ?

Par ailleurs, vous dites

Citation:

---

%d sert juste à formater comme chaine de caractères

---

Ou puis-je trouver les autres paramètres envisageables pour cette fonction ?

En vous remerciant par avance.

Geo-x

Malheureusement je ne maîtrise pas du tout ce module...

En regardant la doc au lien que vous fournissez, je comprends ceci:

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15

from openpyxl import load_workbook from openpyxl import Workbook   # Open source workbook in 'read_only' mode for memory consumption wb_src = load_workbook(filename='large_file.xlsx', read_only=True) # Open destination workbook in 'write_only' mode wb_dst = Workbook(write_only=True)   # Create a new sheet in the destination workbook and copy and paste # everything from the source ('Sheet1') to the destination ws = wb.create_sheet() for row in wb_src['Sheet1'].rows: ws.append([cell for cell in row])   wb.save('new_big_file.xlsx')

---

Attention, je n'ai pas testé.

Pour ce qui est du formatage des chaines de caractères, ce site est pas mal.

Ju