Manipuler un fichier via Python

Version imprimable

27/09/2018, 12h00
mckgh

Manipuler un fichier via Python

Bonjour a tous,

Je souhaite manipuler un fichier avec Python.

Exemple (fichier d'entrer):

Date;Machine;CPU;CODE;MOYENNE
27/09/2018 03h30;AAA1;2.5;AB12;13
27/09/2018 03h31;AAA2;2.1;AB12;13
27/09/2018 03h32;AAA3;2.2;AB12;13

Je souhaite par exemple modifier les colonnes, ajouter des colonnes et modifier le format de la date:
Résultat (fichier de sortie ) :

Date;GROUPE;Machine;MOYENNE;CODE;CPU
2018-09-27 03:30;AAA;AAA1;13;AB12;2.5
2018-09-27 03:31;AAA;AAA2;13;AB12;2.1
2018-09-27 03:32;AAA;AAA3;13;AB12;2.2

J'ai ajouté la colonne "GROUPE" avec la valeur "AAA" pour toutes les lignes et j'ai changé les places des autres colonnes.

Pouvez vous m'aider SVP
Je vous remercie d'avance

Merci beaucoup

Salut,

Citation:

Envoyé par mckgh

Pouvez vous m'aider SVP

Votre fichier (un fichier CSV) est une suite de lignes où les différents éléments de chaque lignes sont séparés par ";". Mais le programmeur Python va voir cela comme si c'était une liste de listes:
Code:

1 2 3 4 5 6 7 8 9 10 11 >>> data = '''Date;Machine;CPU;CODE;MOYENNE ... 27/09/2018 03h30;AAA1;2.5;AB12;13 ... 27/09/2018 03h31;AAA2;2.1;AB12;13 ... 27/09/2018 03h32;AAA3;2.2;AB12;13''' >>> for line in data.splitlines(): print (line.split(';')) ... ['Date', 'Machine', 'CPU', 'CODE', 'MOYENNE'] ['27/09/2018 03h30', 'AAA1', '2.5', 'AB12', '13'] ['27/09/2018 03h31', 'AAA2', '2.1', 'AB12', '13'] ['27/09/2018 03h32', 'AAA3', '2.2', 'AB12', '13'] >>>
Donc votre problème se ramène à ajouter un item comme 2ème élément puis reconstruire la chaîne de caractères et l'écrire dans un nouveau fichier. Normalement, vous avez ouvert un tuto. avant de poster et être capable de réaliser tout ou partie de ces opérations (de bases sur les listes et les chaînes de caractères)... En tous cas, si vous bloquez quelque part, vous devriez quand même avoir un bout de code à présenter et expliquer ce qui vous bloque.

- W

27/09/2018, 14h00
mckgh

Hello wiztricks

Merci pour votre réponse :D
Je débute vraiment sur python.
Je travail d'habitude sur talend et je peut le faire en 2 scd, d’ailleurs si vous avez des questions sur Talend n'hésitez pas.
Donc si vous pouvez juste m'aider sur le début d'un algorithme qui split les colonnes et les insert dans des variable pour pouvoir après les manipuler (changer de position, changer de format de date et ajouter une colonne ):)

Voila
:D

Bonjour,

je proposerais bien d'utiliser le module pandas :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
import pandas as pd
 
# lire le csv
data = pd.read_csv('cheminVersLeFichier/test.csv', sep=';')
data
 
# formater la date
data['Date'] = pd.to_datetime(data['Date'])
data['Date'] = data['Date'].dt.strftime('%Y-%m-%d %H:%M')
data
 
# ajout et calcul de la colonne GROUPE à partir de Machine
data['GROUPE'] = data.apply(lambda row: row.Machine[:3], axis=1)
 
# réorganiser les colonnes
data = data[['Date', 'GROUPE', 'Machine', 'MOYENNE', 'CODE', 'CPU']]
 
# écrire le csv
data.to_csv('cheminVersLeFichier/test2.csv', index = False, sep=';', encoding='utf-8')

Citation:

Envoyé par wiztricks

En tous cas, si vous bloquez quelque part, vous devriez quand même avoir un bout de code à présenter et expliquer ce qui vous bloque.

- W
Code:

1 2 3 4 5 6 import csv with open('monfichier.csv') as csvfile: readCSV = csv.reader(csvfile, delimiter=';') for row in readCSV: print(row[2]+" "+row[3],";",row[0],";",row[1],";",row[4])
Voici un bout de code, j'ai réussi a afficher les colonnes autrement.
Mais comment on peut par exemple mettre les row[1,2...] dans des variables afin de pouvoir les modifier, changer de format, coller par exemple deux colonne dans une seule colonne exp (jai une colonne 'date' "27/09/2018" et une autre 'heure' "00:12" ==> former une seule colonne 'dateHeure' avec un nouveau format etc..) et ensuite tout récrire dans un autre fichier csv avec des autres entête ...

27/09/2018, 16h42
mckgh

Citation:

Envoyé par Supernul

Bonjour,

je proposerais bien d'utiliser le module pandas :

Merci beaucoup Superpasnul:)

mais j'ai ce message : ModuleNotFoundError: No module named 'pandas' :aie:
et vu que c'est mon premier programme Python :aie::aie::aie::aie::aie:
ou je peux le trouver ce module ?

Merci beaucoup
27/09/2018, 16h48
wiztricks

Citation:

Envoyé par mckgh

Mais comment on peut par exemple mettre les row[1,2...] dans des variables afin de pouvoir les modifier, changer de format, coller par exemple deux colonne dans une seule colonne exp

La réponse est "oui" et comme ce sont des opérations de base sur les chaînes de caractères (et les listes) vous auriez déjà la réponse si vous aviez pris le temps d'ouvrir un tuto. avant de poster.

- W
27/09/2018, 16h53
Supernul

Pandas peut s'installer avec pip.
Pour te donner plus d'information, il faut qu'on connaisse ton système et ta version de Python. Pour les personnes qui débutent et qui ne veulent pas se prendre la tête avec la gestion du système, je recommanderais d'installer la suite Anaconda, surtout si tu es sous Windows.
28/09/2018, 10h10
mckgh

Citation:

Envoyé par wiztricks

La réponse est "oui" et comme ce sont des opérations de base sur les chaînes de caractères (et les listes) vous auriez déjà la réponse si vous aviez pris le temps d'ouvrir un tuto. avant de poster.

- W

Bonjour,

Avez vous des liens SVP? parce que honnêtement j'ai cherché sans succès.

Merci
28/09/2018, 10h47
wiztricks

Salut,

Citation:

Envoyé par mckgh

Avez vous des liens SVP? parce que honnêtement j'ai cherché sans succès.

Si vous savez déjà programmer le tuto. qui vient avec Python est un bon début. Sur DVP, vous avez toute une page qui liste les différents cours disponibles ici.

- W
28/09/2018, 10h51
Supernul

Bonjour,

presque tous les tutos de base du site abordent le sujet. Regardez notamment le Swinnen.
Une recherche dans votre moteur de recherche préféré avec des mots clés comme "python manipuler chaines caractères" ou "python fusionner chaines caractères" (le terme approprié est concaténer) ou "python manipuler listes" vous donnent plus liens utiles.