Utiliser sed pour réécrire certaines lignes d'un fichier ?

**Ezzmazz** · 31/10/2019, 16h05

Bonjour,

Je suis confronté à un problème avec la commande sed.

Voici le type de fichier que j'ai :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
2019-10-29-06-00;/dev/xx;512.00;295.16;/opt/
2019-10-29-06-00;/dev/xx;128.00;106.54;/var/
2019-10-29-06-00;/dev/xx;256.00;180.79;/usr/
2019-10-29-06-00;/dev/xx;384.00;191.13;/var/
2019-10-29-06-00;/dev/xx;256.00;255.37;/var/
2019-10-29-06-00;/dev/xx;3200.00;2679.36;/var/opt/
2019-10-29-06-00;/dev/xx;256.00;255.07;/var/
2019-10-29-06-00;/dev/xx;64.00;62.67;/etc/
2019-10-29-06-00;/dev/xx;1664.00;1163.33;/opt
2019-10-29-06-00;/dev/xx;256.00;146.13;/opt/
2019-10-29-06-00;/dev/xx;2176.00;952.90;/opt/
2019-10-29-06-00;/dev/xx;22784.00;10353.91;/opt/
2019-10-29-06-00;/dev/xx;256.00;253.64;/
2019-10-29-12-00;/dev/xx;256.00;229.92;/home
2019-10-29-12-00;/dev/xx;1024.00;556.73;/opt
2019-10-29-12-00;/dev/xx;256.00;180.79;/usr/
2019-10-29-12-00;/dev/xx;384.00;190.90;/var
2019-10-29-12-00;/dev/xx;256.00;255.37;/var/
2019-10-29-12-00;/dev/xx;128.00;127.63;/
2019-10-29-12-00;/dev/xx;256.00;76.86;/opt/
2019-10-29-12-00;/dev/xx;2176.00;1682.93;/opt/
2019-10-29-12-00;/dev/xx;256.00;145.66;/opt/
2019-10-29-12-00;/dev/xx;2176.00;952.90;/opt/
2019-10-29-12-00;/dev/xx;22784.00;10421.72;/opt/
2019-10-29-12-00;/dev/xx;256.00;253.64;/
2019-10-29-18-00;/dev/xx;1024.00;138.8;/
2019-10-29-18-00;/dev/xx;5248.00;4230.34;/usr
2019-10-29-18-00;/dev/xx;2560.00;499.37;/var
2019-10-29-18-00;/dev/xx;3584.00;67.79;/tmp
2019-10-29-18-00;/dev/xx;256.00;25.9;/home
2019-10-29-18-00;/dev/xx;1024.00;467.27;/opt
2019-10-29-18-00;/dev/xx;384.00;0.38;/usr/
2019-10-29-18-00;/dev/xx;256.00;21.36;/
2019-10-29-18-00;/dev/xx;512.00;216.84;/opt/

Je souhaite, dans mon fichier, ne modifier que les lignes allant du début juqu'à la dernière ligne comprenant 2019-10-29-12-00 pour soustraire la valeur $3 à la valeur $4 et que ce résultat prenne la place de la valeur $4. J'arrive à ne cibler ces lignes qu'avec la commande :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sed '/2019-10-29-12-00/{:a;n;//ba;Q}' test2.txt

Ce qui donne :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
2019-10-29-06-00;/dev/xx;512.00;295.16;/opt/
2019-10-29-06-00;/dev/xx;128.00;106.54;/var/
2019-10-29-06-00;/dev/xx;256.00;180.79;/usr/
2019-10-29-06-00;/dev/xx;384.00;191.13;/var/
2019-10-29-06-00;/dev/xx;256.00;255.37;/var/
2019-10-29-06-00;/dev/xx;3200.00;2679.36;/var/opt/
2019-10-29-06-00;/dev/xx;256.00;255.07;/var/
2019-10-29-06-00;/dev/xx;64.00;62.67;/etc/
2019-10-29-06-00;/dev/xx;1664.00;1163.33;/opt
2019-10-29-06-00;/dev/xx;256.00;146.13;/opt/
2019-10-29-06-00;/dev/xx;2176.00;952.90;/opt/
2019-10-29-06-00;/dev/xx;22784.00;10353.91;/opt/
2019-10-29-06-00;/dev/xx;256.00;253.64;/
2019-10-29-12-00;/dev/xx;256.00;229.92;/home
2019-10-29-12-00;/dev/xx;1024.00;556.73;/opt
2019-10-29-12-00;/dev/xx;256.00;180.79;/usr/
2019-10-29-12-00;/dev/xx;384.00;190.90;/var
2019-10-29-12-00;/dev/xx;256.00;255.37;/var/
2019-10-29-12-00;/dev/xx;128.00;127.63;/
2019-10-29-12-00;/dev/xx;256.00;76.86;/opt/
2019-10-29-12-00;/dev/xx;2176.00;1682.93;/opt/
2019-10-29-12-00;/dev/xx;256.00;145.66;/opt/
2019-10-29-12-00;/dev/xx;2176.00;952.90;/opt/
2019-10-29-12-00;/dev/xx;22784.00;10421.72;/opt/
2019-10-29-12-00;/dev/xx;256.00;253.64;/

Et soustraire les valeurs :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sed '/2019-10-29-12-00/{:a;n;//ba;Q}' test2.txt | awk -F';' '{print $1";"$2";"$3";"($3 - $4)";"$5}'

Ce qui donne :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
2019-10-29-06-00;/dev/xx;512.00;216.84;/opt/
2019-10-29-06-00;/dev/xx;128.00;21.46;/var/
2019-10-29-06-00;/dev/xx;256.00;75.21;/usr/
2019-10-29-06-00;/dev/xx;384.00;192.87;/var/
2019-10-29-06-00;/dev/xx;256.00;0.63;/var/
2019-10-29-06-00;/dev/xx;3200.00;520.64;/var/opt/
2019-10-29-06-00;/dev/xx;256.00;0.93;/var/
2019-10-29-06-00;/dev/xx;64.00;1.33;/etc/
2019-10-29-06-00;/dev/xx;1664.00;500.67;/opt
2019-10-29-06-00;/dev/xx;256.00;109.87;/opt/
2019-10-29-06-00;/dev/xx;2176.00;1223.1;/opt/
2019-10-29-06-00;/dev/xx;22784.00;12430.1;/opt/
2019-10-29-06-00;/dev/xx;256.00;2.36;/
2019-10-29-12-00;/dev/xx;256.00;26.08;/home
2019-10-29-12-00;/dev/xx;1024.00;467.27;/opt
2019-10-29-12-00;/dev/xx;256.00;75.21;/usr/
2019-10-29-12-00;/dev/xx;384.00;193.1;/var
2019-10-29-12-00;/dev/xx;256.00;0.63;/var/
2019-10-29-12-00;/dev/xx;128.00;0.37;/
2019-10-29-12-00;/dev/xx;256.00;179.14;/opt/
2019-10-29-12-00;/dev/xx;2176.00;493.07;/opt/
2019-10-29-12-00;/dev/xx;256.00;110.34;/opt/
2019-10-29-12-00;/dev/xx;2176.00;1223.1;/opt/
2019-10-29-12-00;/dev/xx;22784.00;12362.3;/opt/
2019-10-29-12-00;/dev/xx;256.00;2.36;/

Mais là ça s'affiche juste dans mon terminal... Et si je redirige cette commande vers un fichier externe, cela va me créer un fichier qu'avec les lignes modifier. Or, moi je voudrais apporter ces modifications dans mon fichier sans perdre le reste des lignes.

Auriez-vous une solution ?

Merci d'avance !

**Flodelarab** · 31/10/2019, 16h34

Bonjour

Ben oui : arrête d'utiliser sed.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk -F';' '/2019-10-29-12-00/{OFS=FS;$4=$3-$4;} 1' fichier.txt

Remarque quand même que ta méthode est sale. Comment vas-tu différencier le fichier original et celui modifié ?

**N_BaH** · 31/10/2019, 17h15

j'ai compris que le calcul doit être fait depuis la première ligne jusqu'au dernier 2019-10-29-12-00

ne modifier que les lignes allant du début juqu'à la dernière ligne comprenant 2019-10-29-12-00

soit :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

gawk -F ';' 'NR>=1 && noGo==0 || /^2019-10-29-12-00/{if(/^2019-10-29-12-00/)noGo=1;$4=$3-$4}1'

**Ezzmazz** · 31/10/2019, 17h15

Hello !

Tout d'abord merci pour votre aide !

Je sais que ma méthode est sale, voilà pourquoi je suis venu me faire corriger ici !

Cela dit, si je n'avais pas trouvé de moyen pour réécrire directement dans mon fichier, je serais très certainement passé par un fichier temporaire. J'aurai ensuite fait un mv pour récupérer le nom du fichier de base.

Tout ce qui est OFS/FS/NR/FNR et tout ce qui va avec, reste pour moi une source de difficulté. Je n'arrive jamais à les utiliser, je reste bloqué à une utilisation basique d'awk.

Je m'en vais de ce pas tester vos commandes ! Merci encore !

**N_BaH** · 31/10/2019, 17h34

je suis venu me faire corriger ici

bienvenue

**Flodelarab** · 31/10/2019, 18h26

j'ai compris que le calcul doit être fait depuis la première ligne jusqu'au dernier 2019-10-29-12-00

Le tout est de savoir si, dans la phrase originale, "comprenant" se réfère à "les lignes" ou à "la dernière ligne".

NR>=1

Peux-tu citer un cas où NR ne vérifie pas cette condition ?

**balkany** · 31/10/2019, 19h07

Envoyé par Ezzmazz

Mais là ça s'affiche juste dans mon terminal... Et si je redirige cette commande vers un fichier externe, cela va me créer un fichier qu'avec les lignes modifier. Or, moi je voudrais apporter ces modifications dans mon fichier sans perdre le reste des lignes.

Avec gawk, tu peux émuler le comportement de sed -i via le mécanisme d'inclusion :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

gawk -i inplace 'programme-awk' fichier.txt

Cf. https://www.gnu.org/software/gawk/ma...e-Inplace.html

**disedorgue** · 31/10/2019, 21h50

Envoyé par balkany

Avec gawk, tu peux émuler le comportement de sed -i via le mécanisme d'inclusion :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

gawk -i inplace 'programme-awk' fichier.txt

Cf. https://www.gnu.org/software/gawk/ma...e-Inplace.html

Oui, mais tout comme pour sed, on doit tout de même afficher les ligne que l'on ne modifie pas sinon celles-ci ne seront plus dans le fichier.

Le "inplace" de sed ou de awk, ne fait qu'ouvrir le fichier d'origine, une fois ouvert, il l'efface du système et crée un nouveau fichier du même nom.

D'ailleurs, le "inplace" sans backup n'est pas conseillé, puisqu'on perd tout ou une partie si lors de l'exécution, le système plante.

**N_BaH** · 31/10/2019, 23h07

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

NR>=1

Peux-tu citer un cas où NR ne vérifie pas cette condition ?

**Flodelarab** · 01/11/2019, 13h37

Tout ce qui est OFS/FS/NR/FNR et tout ce qui va avec, reste pour moi une source de difficulté.

Probablement car tu ne relies pas ces acronymes aux mots complets.

FS = Field Separator = séparateur de champ. Tu sais ce que c'est puisque tu l'as fixé avec l'option -F ';'. On aurait put écrire BEGIN{FS=";";} mais c'est plus long.
OFS = Output Field Separator = séparateur de champ en sortie. L'autre (FS) est donc en entrée. Si tu ne dis pas que c'est le même, il va remplacer les points-virgules par des espaces. Dans ma proposition, j'aurais pu éviter d'affecter OFS autant de fois qu'il y a de lignes, par une entête du type :
Code : Sélectionner tout - Visualiser dans une fenêtre à part
```
awk -F';' -vOFS=';' '/2019-10-29-12-00/{$4=$3-$4;} 1' fichier.txt
```
NR = Number of Records = nombre d'enregistrements. Nombre d'enregistrements lus jusqu'ici. Par défaut, le nombre de lignes.
FNR = File Number of Records = nombre d'enregistrements du fichier. Remis à 0 pour chaque fichier en entrée.
RS = Record Separator = séparateur d'enregistrement. Au lieu de considérer le fichier texte composé de lignes comme enregistrements et de mots comme champs, on va choisir un autre caractère pour définir les limites des enregistrements.
ORS = Output Record Separator = séparateur d'enregistrement en sortie.L'autre (RS) est donc en entrée. Attention quand même avec ORS : un fichier texte doit finir par \n.
NF = Number of Fields = nombre de champs. C'est ce qui permet d'écrire $NF pour désigner le dernier champ.

**Ezzmazz** · 02/11/2019, 13h45

Envoyé par N_BaH

bienvenue

Merci

Envoyé par Flodelarab

Probablement car tu ne relies pas ces acronymes aux mots complets.

FS = Field Separator = séparateur de champ. Tu sais ce que c'est puisque tu l'as fixé avec l'option -F ';'. On aurait put écrire BEGIN{FS=";";} mais c'est plus long.
OFS = Output Field Separator = séparateur de champ en sortie. L'autre (FS) est donc en entrée. Si tu ne dis pas que c'est le même, il va remplacer les points-virgules par des espaces. Dans ma proposition, j'aurais pu éviter d'affecter OFS autant de fois qu'il y a de lignes, par une entête du type :
Code : Sélectionner tout - Visualiser dans une fenêtre à part
```
awk -F';' -vOFS=';' '/2019-10-29-12-00/{$4=$3-$4;} 1' fichier.txt
```
NR = Number of Records = nombre d'enregistrements. Nombre d'enregistrements lus jusqu'ici. Par défaut, le nombre de lignes.
FNR = File Number of Records = nombre d'enregistrements du fichier. Remis à 0 pour chaque fichier en entrée.
RS = Record Separator = séparateur d'enregistrement. Au lieu de considérer le fichier texte composé de lignes comme enregistrements et de mots comme champs, on va choisir un autre caractère pour définir les limites des enregistrements.
ORS = Output Record Separator = séparateur d'enregistrement en sortie.L'autre (RS) est donc en entrée. Attention quand même avec ORS : un fichier texte doit finir par \n.
NF = Number of Fields = nombre de champs. C'est ce qui permet d'écrire $NF pour désigner le dernier champ.

Merci pour ces explications ! C'est beaucoup plus compréhensible !

Utiliser sed pour réécrire certaines lignes d'un fichier ?

Shell et commandes GNU

Discussions similaires

Partager

Partager