Discussion :

[airfox35]

Bonjour,

Dans un script bash, je parse des fichiers csv séparateur ";". Hors j'ai un champ spécifique chaine, qui peut contenir mon séparateur avec un nombre variable d'occurences.

Exemple:

aaa;bbb;"C11; C22;C23(cc)";ddd;eee
fff;ggg;"hhhh1;hhhh3;hhhh4;";iii;jjj

la position de la chaine dans le fichier est fixe (champ 3 dans l'exemple).
Mon but, remplacer les séparateurs dans cette chaine, pour permettre un traitement particulier ensuite.

Résultat attendu:

aaa;bbb;"C11, C22,C23(cc)";ddd;eee
fff;ggg;"hhhh1,hhhh3,hhhh4,";iii;jjj

Remarque:

J'ai trouvé le moyen de le faire avec awk, mais mon traitement serait simplifié si je trouvais le moyen de le faire avec un sed -i

Commande awk:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

cat $file | awk -F\" 'BEGIN {OFS="\""}{gsub(";",",",$2);print}'

Dans mon script, ça m'obligerait à passer par un fichier intermédiaire pour chaque csv

La plupart de mes occurrences ont un espace après le séparateur, mais pas tous ...
Donc la seule commande:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sed -i 's/; /, /g' *.csv

ne couvre pas tous les cas.

Peut-on faire cela avec Sed, j'ai bien du mal à créer une règle délimitant la chaine (entre 2 ") et substituant toutes les occurrences de ; entre "" ..

Merci de votre aide

[zipe31]

Salut,

J'ai trouvé le moyen de le faire avec awk, mais mon traitement serait simplifié si je trouvais le moyen de le faire avec un sed -i

À noter que depuis la version awk 4.1.0, awk intègre la fonction inplace.

Donc je suppute qu'avec cette version, la commande suivante :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

 awk -i inplace -v INPLACE_SUFFIX=.bak -F\" 'BEGIN {OFS="\""}{gsub(";",",",$2);print}' $file

Devrait le faire

Honnêtement avec sed je doute qu'on puisse y arriver

[zipe31]

Honnêtement avec sed je doute qu'on puisse y arriver

J'aurais mieux fait de tourner 7 fois ma souris autour du clavier avant d'écrire môa

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
$ cat plop 
aaa;bbb;"C11; C22;C23(cc)";ddd;eee
fff;ggg;"hhhh1;hhhh3;hhhh4;";iii;jjj
 
$ sed ':z;s/\("[^;]*\)[^"];/\1,/;tz' plop 
aaa;bbb;"C1, C2,C23(cc)";ddd;eee
fff;ggg;"hhhh,hhhh,hhhh,";iii;jjj

[airfox35]

Merci pour ta réponse zipe31! C'est presque bon, ca zappe chaque caractère juste devant le ";" :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
$ cat plop 
aaa;bbb;"C11; C22;C23(cc)";ddd;eee
fff;ggg;"hhhh1;hhhh3;hhhh4;";iii;jjj

$ sed ':z;s/\("[^;]*\)[^"];/\1,/;tz' plop 
aaa;bbb;"C1, C2,C23(cc)";ddd;eee
fff;ggg;"hhhh,hhhh,hhhh,";iii;jjj

Bien que je pense comprendre la regexp, le début et la fin m'échappent, si tu as un moment pour décrypter

Pour info, je suis sur du awk 3.1.3 et pas le droit de mise à jour pour profiter du inline

Merci!

[zipe31]

Oups

Et comme ça, c'est mieux ?

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
$ sed ':z;s/\("[^;]*[^"]\);/\1,/;tz' plop 
aaa;bbb;"C11, C22,C23(cc)";ddd;eee
fff;ggg;"hhhh1,hhhh3,hhhh4,";iii;jjj

[airfox35]

Magnifique, vraiment je te remercie.

Je vais tâcher de comprendre maintenant. Le z semble faire référence à un label posé sur le signe ";" , le "t" m'échappe.

[N_BaH]

Bonjour,

ça m'obligerait à passer par un fichier intermédiaire pour chaque csv

un même fichier pour tous les CSV, qui sera écrasé à chaque fois, pour, finalement, être supprimé.

note que sed lui-même utilise un fichier temporaire.

[zipe31]

Je vais tâcher de comprendre maintenant. Le z semble faire référence à un label posé sur le signe ";" , le "t" m'échappe.

:z
On pause une étiquette (pour branchement futur).


s/\("[^;]*[^"]\);/\1,/
Pour la substitution on va jouer avec les sous-expression \(...\) et les références arrières \1.
Une sous-expression est délimitée par des parenthèses (...), protégées en l'occurrence.

\("[^;]*[^"]\);
On cherche une chaîne de caractères débutant par un guillemet double ("), suivi de nimporte quels caractères hormis le caractère point virgule ([^;]*) et hormis le guillemet fermant ([^"]).

\1,
Quand la chaîne a été trouvée, on la substitue par elle même \1 suivie d'une virgule.


t z
Banchement conditionnel (t). Tant qu'une substitution a lieu, alors on se branche à l'étiquette (z).