Discussion :

[razam]

Bonjour,
je cherche à identifier TOUS les paramètres d'appel GET dans des fichiers de logs
exemple:
Fichier log1>
nianiania GET /site1/branch1?arg1=XXXX&arg2=XXXXX&arg3=XXXXX&date=XXXXX&info=XXXX etc...

Donc le but est de répertorier tous les arguments qui sont passés lors de requêtes à un site donné dans un fichier de log donné
le résultat dans l'exemple ci dessus serait:
arg1
arg2
arg3
date
info
etc..

j'essaie un truc du style (qui ne marche pas bien sur)=>

grep site1 log1 | sed -e "s/.*&([^=]+)=/\1/g" | sort -u

Le problème est que je ne sais pas à l'avance combien il y a de paramètres transmis...

Quelqu'un a une idée ?

[razam]

j'ai presque trouvé:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep -r -n -i site1 log1| grep -Eo "[&?][^=]+=" | sed -e "s/[&?]\([^=]+\)=/\1/g" | sort -u

mais apparait toujours dans la liste les arguments encadrés de &? et = (le sed ne fonctionne pas)

[Flodelarab]

Bonjour,

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
$ sed 's/.*?//;s/&/\n/g;s/=/\n/g' <<<"/site1/branch1?arg1=XXXX&arg2=XXXXX&arg3=XXXXX&date=XXXXX&info=XXXX"
arg1
XXXX
arg2
XXXXX
arg3
XXXXX
date
XXXXX
info
XXXX

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
$ sed 's/.*?//;s/&/\n/g;s/=/\n/g' <<<"/site1/branch1?arg1=XXXX&arg2=XXXXX&arg3=XXXXX&date=XXXXX&info=XXXX" |sed '2~2d'
arg1
arg2
arg3
date
info

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
$ sed 's/.*?//;s/=[^&]*/\n/g;s/&//g;s/\n$//' <<<"/site1/branch1?arg1=XXXX&arg2=XXXXX&arg3=XXXXX&date=XXXXX&info=XXXX"
arg1
arg2
arg3
date
info

[razam]

la troisième commande sed marche nikel merci

[disedorgue]

Bonjour,
Une solution via grep (supportant le perl regex engine):

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
$ grep -Po '(?<=[?&])[^=]*(?==)' <<<'nianiania GET /site1/branch1?arg1=XXXX&arg2=XXXXX&arg3=XXXXX&date=XXXXX&info=XXXX' 
arg1
arg2
arg3
date
info

[Flodelarab]

Bon, ben, va pour la solution awk:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
$ awk -F'[=&?]' '{for (i=2;i<=NF;i=i+2) print $i;}' <<<"/site1/branch1?arg1=XXXX&arg2=XXXXX&arg3=XXXXX&date=XXXXX&info=XXXX"
arg1
arg2
arg3
date
info

[Flodelarab]

ou pire:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
$ awk 'BEGIN{RS="[=&?]";} NR%2==0{print $0;}' <<<"/site1/branch1?arg1=XXXX&arg2=XXXXX&arg3=XXXXX&date=XXXXX&info=XXXX"
arg1
arg2
arg3
date
info