Discussion :

[huître]

Bonjour,

je suis novice en Shell, et après avoir fait un extraction j'ai obtenu un fichier de la forme suivante

groupe1
aaaa
cccc
dddd
--
groupe2
rrrrrr
gggg
bbbb
--

j'aimerai bien extraire les groupes et les mettre à coté des membre
un peu comme ça

groupe1;aaaa
groupe1;cccc
groupe1;dddd
--

groupe2;rrrrrr
groupe2;gggg
groupe2;bbbb
--

j'arrive à coller qu'un groupe en combinant une variable et un sed, soit dit en passant le groupe se colle partout, je n'ai pas mis de condition me permettant de passer au groupe suivant et je ne vois pas comment faire d'ailleurs

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
for s in `egrep -v 'uid|cn|--' xxxx.csv` ;do 
sed -e 's/\(uid=.*\)/\1\;'"$s"'/' xxxxx.csv >resultat.txt
done;

pouvez vous m'aider ?
merci d'avance.

[Invité]

As-tu à chaque fois 3 membres comme dans ton exemple (ça m'étonnerais)?
Les groupes sont-ils bien séparé par un "--" à chaque fois ?

[huître]

salut

en effet, suivant le groupe, le nombre de membres est différents

pour la deuxième question, oui le fichier se termine bien par --, j'ai fait l'extraction de manière a bien dissocier les groupes

[Sve@r]

pour la deuxième question, oui le fichier se termine bien par --, j'ai fait l'extraction de manière a bien dissocier les groupes

Salut
Dans ce cas, pas de souci. te suffit de lire le fichier ligne par ligne et si tu es sur "--" tu supprimes un flag que tu remplis à la ligne suivante et que tu utilises pour les autres lignes...

Code bash :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
#!/bin/sh
cat fichier | while read ligne
do
    # Si on est  sur la ligne repère
    if test "$ligne" = "--"
    then
        # On écrit la ligne et une ligne vide (comme dans l'exemple)
        echo "$ligne"
        echo
 
        # On supprime le flag et on passe à la ligne suivante
        unset groupe
        continue
    fi
 
    # Si on est sur une ligne et que le flag n'existe pas
    if test -z "$groupe"
    then
        # On se trouve fatalement sur une ligne "groupe"
        groupe="$ligne"
        continue
    fi
 
    # On est sur une ligne standard - On la réécrit en rajoutant le groupe
    echo "$groupe:$ligne"
done

et je ne vois pas comment faire d'ailleurs

Arrivé à un certain niveau de difficulté, faut arrêter de croire que les outils de base sont assez "magiques" pour tout faire et faut plonger un peu les mains dans la prog (quoique j'ai vu parfois des trucs extraordinaires faits avec une simple regex...)

[noooop]

Ma solution:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk '/--/ {print ""} $1 != "--" {printf("%s ",  $1)}' fichier3.txt  | awk '{for (i = 2; i <= NF; i++) { print $1 ";" $i}; print "--"}'

Edit: j'avais pas vu. S'il y a des espaces, utiliser un caractère | ou # comme séparateur de champs

[huître]

merci les deux solutions marche à merveille vous êtes des genies

[Flodelarab]

Bonjour

Pour info, 2 solutions sed:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
$ cat test.txt 
groupe1
aaaa
cccc
dddd
--
groupe2
rrrrrr
gggg
bbbb
--
$ sed -n '/--/{s/.*//;x;s/;//;s/\n//g;p;d};s/^/;/;H' test.txt 
groupe1;aaaa;cccc;dddd
groupe2;rrrrrr;gggg;bbbb
$ sed ':z;N;/--/!b z;s/\n/;/g;s/;--//' test.txt 
groupe1;aaaa;cccc;dddd
groupe2;rrrrrr;gggg;bbbb

[Sve@r]

Ma solution:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk '/--/ {print ""} $1 != "--" {printf("%s ",  $1)}' fichier3.txt  | awk '{for (i = 2; i <= NF; i++) { print $1 ";" $i}; print "--"}'

Pas mal. J'ai dû la tester pour la comprendre.

Mais le second awk peut avantageusement être remplacé par un sed moins gourmand.

Bonjour

Pour info, 2 solutions sed:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
$ cat test.txt 
groupe1
aaaa
cccc
dddd
--
groupe2
rrrrrr
gggg
bbbb
--
$ sed -n '/--/{s/.*//;x;s/;//;s/\n//g;p;d};s/^/;/;H' test.txt 
groupe1;aaaa;cccc;dddd
groupe2;rrrrrr;gggg;bbbb
$ sed ':z;N;/--/!b z;s/\n/;/g;s/;--//' test.txt 
groupe1;aaaa;cccc;dddd
groupe2;rrrrrr;gggg;bbbb

Très élégant aussi (surtout que j'y pige que dalle)
Mais (hélas) il manque les lignes "--" de séparation

merci les deux solutions marche à merveille vous êtes des genies

Essaye plutôt de les étudier pour pouvoir, plus tard, les trouver toi-même et toi aussi tu seras un génie

[N_BaH]

en général, awk | awk peut être remplacé par un seul awk qui utilise un tableau.

j'ai fait l'extraction de manière a bien dissocier les groupes

"l'extraction" elle-même pourrait être réalisée dans ce même awk.
en attendant de voir le fichier CSV original :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
$ cat fichier
groupe1
aaaa
cccc
dddd
--
groupe2
rrrrrr
gggg
bbbb
--
 
$ awk 'NR==1{g=$1}NR!=1&&!/^--$/{a[++n]=$1}/^--$/{for(i in a)printf("%s;%s\n",g,a[i]);delete a ; NR="1"}' fichier.txt
groupe1;aaaa
groupe1;cccc
groupe1;dddd
groupe2;rrrrrr
groupe2;gggg
groupe2;bbbb

[Flodelarab]

Ça aurait été mieux si j'avais lu la question.

Deuxième essai:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
$ sed -n '1{h;d};/--/{N;s/--\n//;h;d};G;s/\(.*\)\n\(.*\)/\2;\1/p' test.txt 
groupe1;aaaa
groupe1;cccc
groupe1;dddd
groupe2;rrrrrr
groupe2;gggg
groupe2;bbbb

[noooop]

en général, awk | awk peut être remplacé par un seul awk qui utilise un tableau.

Je sais, mais j'applique l'adage: "small is beautiful". Deux procs awk simples sont plus lisibles que 1 seule complexe. Du moins pour moi. C'est plus facile quand je me relis des mois après. Et quelque fois c'est réutilisable....

[Sve@r]

Je sais, mais j'applique l'adage: "small is beautiful".

Alors tu ne seras pas contre une solution "plus small" et donc "plus beautiful"...
awk '/--/ {print ""} $1 != "--" {printf("%s ", $1)}' fichier3.txt | sed -e "s/ /;/"

[noooop]

Alors tu ne seras pas contre une solution "plus small" et donc "plus beautiful"...
awk '/--/ {print ""} $1 != "--" {printf("%s ", $1)}' fichier3.txt | sed -e "s/ /;/"

Marche pas ????

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
xxx@xxx:~/test1$ awk '/--/ {print ""} $1 != "--" {printf("%s ", $1)}' fichier3.txt | sed -e "s/ /;/"
groupe1;aaaa cccc dddd 
groupe2;rrrrrr gggg bbbb kkk

[N_BaH]

ah, oui, c'est mieux, Sve@r; mais le sed ne fait pas ce qu'il devrait, et ne sert à rien.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk '{if($1~"--"){print v; v=""} else v=v?v";"$1:$1}' fichier

[disedorgue]

Bonjour,

Ma petite contribution pour le fun:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
$ cat tt.vv
groupe1
aaaa
cccc
dddd
--
groupe2
rrrrrr
gggg
bbbb
--
$ x=$(<tt.vv);echo ${x//--/\\n} | while read x; do set -- $x; y=$1; shift; for z in $*; do echo "$y;$z"; done; done
groupe1;aaaa
groupe1;cccc
groupe1;dddd
groupe2;rrrrrr
groupe2;gggg
groupe2;bbbb

[N_BaH]

alors en 100% bash :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

while read -d'--' -a ar; do for i in "${ar[@]:1}"; do echo "${ar[0]};$i"; done; done <fichier

EDIT:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

while read -d'--' -a ar; do ((${#ar[@]})) && printf "${ar[0]};%s\n" "${ar[@]:1}"; done <fichier

[Sve@r]

alors en 100% bash

Ma première aussi était 100% bash
Moi, ce qui m'éclaterait, c'est de voir la tête de huître devant la façon dont on s'"amuse" avec son pb

[zipe31]

Salut@tous,

Et une moulinette sédesque de plus, une

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
$ sed -n 'h;:z;N;/--$/!{s/\n/;/p;g;bz};s/.*/--\n/p' plop 
groupe1;aaaa
groupe1;cccc
groupe1;dddd
--
 
groupe2;rrrrrr
groupe2;gggg
groupe2;bbbb
--

[huître]

finalement je n'ai plus -- ce qui est devenu embarrassant
mon grep ne renvoie plus les --

ducoup j'ai

groupe1
ID=aaaaa
ID=bbbbbb
groupe2
ID=aaaaa
ID=bbbbbb
groupe3
ID=aaaaa
ID=bbbbbb

donc je ne vois pas comment faire maintenant

[disedorgue]

Peux tu nous fournir un exemple concret de ce que tu veux (input-ouput) car à priori, les specs ont changés...
Et si tu nous disais ce que tu as comme input au départ avant un filtre quelconque, peut-être que l'on pourra te donner une solution plus simple...