Parseur en shell

Version imprimable

22/05/2008, 14h02
Mokujil

Parseur en shell

Bonjour,
Je débute en shell. Dans le cadre d' un stage je doit réaliser un parseur en shell qui sépare les information d'un log apache par des ' | ', en les copiant dans un autre fichier.
Voici un exemple d' une ligne du log

Code:

127.0.0.1 - - [21/May/2008:10:48:26 +0200] "GET /apache2-default/mon.gif?nom=dupont&prenom=christopher&age=19&date=1989-09-05 HTTP/1.1" 304 - "http://127.0.0.1/apache2-default/" "Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.8.1.6) Gecko/20071008 Ubuntu/7.10 (gutsy) Firefox/2.0.0.6"

Pour séparé j'ai choisi d'utiliser la commande sed.
J'ai réussi à séparer l'adresse ip en faisant

Code:

sed -e "s/ \- \- \[/\|/g" access.log > access.tmp && mv -f access.tmp access.log

La première partie de la commande testé en console marche bien et remplace bien les '- - [ 'par un '|', mais j'ai un petit problème, je n'ai pas de fichier access.tmp
Je ne trouve pas la solution à ce problème, j' utilise sûrement mal la commande.
Une âme charitable pourrais m'aider s'il vous plaît :cry: .
Merci d'avance,

Petit edit, quand je test juste

Code:

sed -e "s/ \- \- \[/\|/g" access.log > access.tmp

Ca remplasse et ca copie en créant le fichier access.tmp
mais quand je lance avec mon script plusieurs commandes ça ne marche pas.
22/05/2008, 18h11
BlaireauOne

Citation:

Envoyé par Mokujil

.../...
mais quand je lance avec mon script plusieurs commandes ça ne marche pas.

Citation:

Si tu postais le script avec les commandes, ce serait plus facile pour t'aider :mrgreen:

Voilà mon script.

Code:

1
2
3
4
5
6
7
8
9
10
 
echo "Execution du script"
 
sed -e "s/ \- \- \[/\|/g" access.log > access.tmp && mv -f access.tmp access.log
sed -e "s/ \+0200\] \"GET \/apache2\-default\/mon\.gif\?nom\=/\|/g" access.log > access.tmp && mv -f access.tmp access.log
sed -e "s/ \+0200\] \"GET \/apache2\-default\/ HTTP\/1\.1\" 304 \- \"http\:\/\/127\.0\.0\.1\/\" \"Mozilla\/5\.0 \(X11\; U\; Linux i686\; en\-US\; rv\:1\.8\.1\.6\) Gecko\/20071008 Ubuntu\/7\.10 \(gutsy\) Firefox\/2\.0\.0\.6\"/\|/g" access.log > access.tmp && mv -f access.tmp access.log
sed -e "s/\&prenom\=/\|/g" access.log > access.tmp && mv -f access.tmp access.log
sed -e "s/\&age\=/\|/g" access.log > access.tmp && mv -f access.tmp access.log
sed -e "s/\&date\=/\|/g" access.log > access.tmp && mv -f access.tmp access.log
sed -e "s/ HTTP\/1\.1\" 304 \- \"http\:\/\/127\.0\.0\.1\/\" \"Mozilla\/5\.0 \(X11\; U\; Linux i686\; en\-US\; rv\:1\.8\.1\.6\) Gecko\/20071008 Ubuntu\/7\.10 \(gutsy\) Firefox\/2\.0\.0\.6\"/\|/g" access.log > access.tmp && mv -f access.tmp access.log

Dans mon access.log ca remplace les ip par des ' | ', par contre toutes les autres ne marchent pas. Je ne sais pas si j'ai oublié d'échapper des caractères spéciaux ou pas. Ou alors si j'ai oublié quelque chose.
Merci,

Citation:
Envoyé par Mokujil
Voilà mon script.
Code:

1 2 3 4 5 6 7 8 9 10 echo "Execution du script" sed -e "s/ \- \- \[/\|/g" access.log > access.tmp && mv -f access.tmp access.log sed -e "s/ \+0200\] \"GET \/apache2\-default\/mon\.gif\?nom\=/\|/g" access.log > access.tmp && mv -f access.tmp access.log sed -e "s/ \+0200\] \"GET \/apache2\-default\/ HTTP\/1\.1\" 304 \- \"http\:\/\/127\.0\.0\.1\/\" \"Mozilla\/5\.0 \(X11\; U\; Linux i686\; en\-US\; rv\:1\.8\.1\.6\) Gecko\/20071008 Ubuntu\/7\.10 \(gutsy\) Firefox\/2\.0\.0\.6\"/\|/g" access.log > access.tmp && mv -f access.tmp access.log sed -e "s/\&prenom\=/\|/g" access.log > access.tmp && mv -f access.tmp access.log sed -e "s/\&age\=/\|/g" access.log > access.tmp && mv -f access.tmp access.log sed -e "s/\&date\=/\|/g" access.log > access.tmp && mv -f access.tmp access.log sed -e "s/ HTTP\/1\.1\" 304 \- \"http\:\/\/127\.0\.0\.1\/\" \"Mozilla\/5\.0 \(X11\; U\; Linux i686\; en\-US\; rv\:1\.8\.1\.6\) Gecko\/20071008 Ubuntu\/7\.10 \(gutsy\) Firefox\/2\.0\.0\.6\"/\|/g" access.log > access.tmp && mv -f access.tmp access.log
Dans mon access.log ca remplace les ip par des ' | ', par contre toutes les autres ne marchent pas. Je ne sais pas si j'ai oublié d'échapper des caractères spéciaux ou pas. Ou alors si j'ai oublié quelque chose.
Merci,
Pour les échappements oubliés, je sais pas trop (en fait j'ai pas vraiment le temps d'analyser tes regex). En revanche, tu peux éviter toutes ces opérations "au coup par coup" en écrivant à chaque fois dans access.tmp (long long long)

Pour résumer, tu peux remplacer
Code:

1 2 3 sed "machin" access.log >access.tmp && mv access.tmp access.log sed "truc" access.log >access.tmp && mv access.tmp access.log sed "chose" access.log >access.tmp && mv access.tmp access.log
Par

Code:

sed -e "machin" -e "truc" -e "chose" access.log >access.tmp && mv access.tmp access.log

22/05/2008, 21h49
Mokujil

Ahh, tu m'apprend un truc très utile :D Merci beaucoup, ça m'évitera de me prendre la tête à l'avenir.
Edit: Je viens de tester ce matin. Et le résultat est positif, vu qu' le nom=, date=, et age= on été supprimé.
Pour le reste je pense qu c'est une erreur des échappement.
Merci beaucoup encor. Problème résolu :yaisse2: