Discussion :

[Tchupacabra]

Bonjour,

Je souhaite transformer un fichier log en fichier CSV.

fichier log :

id=firewall time="2013-09-03 19:30:06" fw="TONTON" tz=+0200 startime="2013-09-03 19:30:04" pri=5 proto=smtp user=titi@titi.com src=5.39.15.102 dst=178.201.80.83 spamlevel=0 action=block dstname=aaaa@aaaa.fr msg="Connection interrupted"

id=firewall time="2013-09-13 19:30:06" fw="TONTON" tz=+0200 startime="2013-19-03 19:30:04" pri=5 proto=smtp user=tata@tata.com src=17.18.19.102 dst=178.201.80.83 spamlevel=0 action=block dstname=bbbbb@aaaa.fr msg="Connection interrupted"

J'ai cette commande (pour le moment) :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sed -re 's/ [^=]+=/,/g' avant.log > apres.csv

qui ne marche pas avec les valeurs délimitées par des " comme time="2013-09-03 19:30:06" D'après mes recherches, cela ressemble à des remplacements conditionnels mais je n'arrive pas à le faire.

Pourriez-vous m'aider à obtenir le résultat suivant ?

firewall,2013-09-03 19:30:06,TONTON,+0200,2013-09-03 19:30:04,5,smtp,titi@titi.com,5.39.15.102,178.201.80.83,0,block,aaaa@aaaa.fr,Connection interrupted

Merci d'avance

[disedorgue]

Bonjour,

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sed -re 's/^[^=]*=| [^ ]*=/,/g;s/^,|"//g' avant.log > apres.csv

[Tchupacabra]

Vous êtes un expert disedorgue !
Merci beaucoup. Ta commande marche très bien.

Cependant je me suis rendu compte (grâce à ton script qui me permet d'ouvrir le fichier CSV dans LibreOffice) que sur certaines lignes du fichier log, il manque plusieurs colonnes.
Du coup, j'ai l'impression que je vais devoir pondre un sed gérant colonne après colonne...

...à moins d'avoir une idée !?

[Tchupacabra]

Est-il possible de "dire" à sed par exemple :
- la valeur <time> va en 1ère colonne
- la valeur <user> va en 2ème colonne (après le 1er ",")
- la valeur <dstname> va en 3ème colonne (après le 2ème ",")
???

[disedorgue]

Oui, c'est possible, mais il faut faire de la capture d'arguments et en sed, on ne peut pas dépasser les 9 arguments.
Je pense que dans ton cas, awk serait plus adapté avec au pire un premier filtre en sed (quoi que l'on peut le faire avec awk).
Il faudrait que tu fournisses un input et un output plus fourni déjà pour résoudre ton problème de colonnes manquantes.

[Tchupacabra]

admettons que 9 colonnes me suffit...

Pourrais-tu STP me montrer un exemple de capture d'arguments basé sur mon précédent post ?

Si besoin j'afficherai un résumé du fichier log avec les quelques cas particuliers.