Fonction avec fichier en paramètre

Bonjour,

1 - Je souhaiterai créer une fonction qui récupère un extrait de log entre 2 horodatages.
J'ai besoin de votre aide car c'est assez ardu pour moi.

Le format horaire du log est du type : 24/01/2013 16:13
imaginons que
$1=heure_debut
$2=heure_fin

2 - Je souhaiterai variabiliser le nom d'entree laissé au choix de l'utilisateur. C'est à dire s'il n'existe pas, le script le créera en lui ajoutant les commentaires.

3 - Parfois les logs pour une raison ou une autre n'ont pas entièrement loggés, je souhaiterai que si heure_debut renseigné n'existe pas, le script prendra la 1ère ligne .précédente ayant été taggée par une heure. sinon prendre la 1ère ligne du log.

4 - idem pour heure_fin si n'existe pas prendre 1ère heure suivante taggée sinon allez jusqu'à la fin.

5 - Enfin est-il possible d'aligner les colonnes du fichier d'entree ?

Merci d'avance

Code:

---

1 2 3 4 5 6 7 8 9 10

function f1 { } egrep -v '^#' liste_fic \ | while read arg1 arg2 arg3 arg4; do f1 $arg1 $arg2 $arg3 $arg4 done

---

Code:

---

./mon_script liste_fic

---

J'ai seulement renseigné $1 et $2.

Code:

---

1 2 3 4

vi list_fic # $1 $2 $3 $4 #heure_debut heure_fin date contexte 08 09 $3 $4

---

si tu nous exposais ton problème en entier, plutôt que par petits bouts.

c'est comme si tu nous demandais de peindre ton mur, mais qu'à chaque fois on doive faire le mélange de couleurs; forcément le résultat ne sera pas uniforme; ce sera "moderne" :?; "conceptuel" :mrgreen:

mais alors que le mur ne va pas s'écrouler, nos codes peuvent ne pas s'interfacer, être redondant, "anti-optimaux" (?)

je tiens également à pointer un manque patent de recherches, au niveau algorithmique (il paraît te manquer une vue d'ensemble), et sur internet.

Citation:

---

Envoyé par N_BaH

je tiens également à pointer un manque patent de recherches, au niveau algorithmique (il paraît te manquer une vue d'ensemble), et sur internet.

---

Je plussoie et j'ai aussi l'impression que tu n'as pas écrit beaucoup de code pour ton problème... mais il n'est pas trop tard pour t'y mettre!

Lire les tutoriels, faire des petits essais, tester le comportement des commandes, faire les exercices des tutoriels, etc.

Sinon, la présentation en couleurs des morceaux de problèmes :ccool:

Citation:

---

Envoyé par amazigh42

Bonjour,

1 - Je souhaiterai créer une fonction qui récupère un extrait de log entre 2 horodatages.
J'ai besoin de votre aide car c'est assez ardu pour moi.

---

Allez, j'ai pitié!
Un indice: regarde du côté de sed :

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14

$ cat /tmp/plop a b c d e f g h $ sed -n "/c/,/f/p" /tmp/plop c d e f

---

Si les motifs "c" et "f" contiennent des "/" il faut mettre un \ devant chacun.

Bonjour,

Il est vrai que pour le point 1, on peut s'orienter vers sed, mais pour les points 3 et 4, awk est, en mon sens, plus adapté :)

Pour l'instant, il manque pas mal d'informations:
1) l'horodatage, c'est la date + les heures ou juste les heures ?
2) le fichier de log est il trié par date et heures (dans le cas de programmes "multithreadé" comme jboss par exemple, ce n'est pas le cas) ?
3) pour le point 5 concernant l'alignement des colonnes, il faudrait savoir a quoi ressemble le fichier d'entrée.
...

Cordialement.

Bonjour,

Merci de ton aide.

1) L'horodatage est sur la date et l'heure voici le formatage d'une ligne [08/02/2013 11:01:32,811] bla bla bla
2) La rotation des logs est journalière donc la date est fixe, le tri dans le log est fait par l'heure 4 premiers digits.

3) Le fichier d'entrée ressemble à cela :

Code:

---

vi list_fic

---

Code:

---

1 2 3

# $1 $2 $3 $4 # heure_debut heure_fin date contexte 09 11 08/02/2013 YY

---

Bonsoir,

Il y a encore des zones d'ombres:
Pour le point 3 (et 4) si on veut par exemple les logs de 09 heures à 11 heures et qu'il n'y a pas de logs sur la plage des 09 heures, est-ce que l'on doit remonter jusqu'à 08:59 (si elle existe) ou jusqu'au plus proche des 08:00 (en admettant que l'on a des logs sur la plage des 08 heures) ?

De même, peux tu garantir que dans ton fichier de log, il n'y a que des lignes horodatées et seulement des lignes horodatées ?

Pour l'alignement des colonnes du fichier d'entrée, à priori, celles-ci sont déjà alignées sauf pour tes 2 lignes de commentaires. Si tu veux aligner aussi ces 2 lignes la, il faut que tu respectes le même nombre de colonne, soit en choisissant un autre séparateur que l'espace, soit en supprimant l'espace qui se trouve après le '#', ou soit définissant un nombre de caractère fixe par colonne quitte à faire du remplissage avec des espaces.

Cordialement.

Merci de t'être intéressé à mon cas sans condescendance.

La rotation des logs est journalière.
L'horodatage concerne le contenu d'un log sur une journée.
En fait les remontées d'erreur sont horodatées. Une stack erreur peut tenir plusieurs lignes, seule la 1ère d'une même erreur est horodatée.
Effectivement si dans la journée du 15 janvier si je mets en paramètres 09 et 11H et que 11H n'existe pas, il serait souhaitable de prendre l'heure suivante. Et inversement si 09H n'existe pas, prendre l'heure précédente.

Concernant le tableau, il s'agissait d'aligner le commentaire correspondant au titre des variables. Je sais ce qu'il faut faire mais pas comment. C'est dire comment créer des espaces pour aligner ?

Bonsoir,

Voici un exemple de programme à adapter:

Code:

---

1 2 3 4 5 6

#!/bin/bash FICHIER_LOG=$4 HEURE_DEB="[$3 ${1}A" HEURE_FIN="[$3 ${2}A" BORNES=$(echo -n $((echo -e "${HEURE_DEB}\n${HEURE_FIN}" ; cut -d':' -f1 ${FICHIER_LOG}) | sort -u | grep -C1 '^\(\'"${HEURE_DEB}"'\|\'"${HEURE_FIN}\)" | sed '2,6d ; s/\([\[\/]\)/\\\1/g') | sed -e 's/\(.* .*\) \(.* .*\)/\/\1\/,\/\2\//') sed -n "${BORNES}p" ${FICHIER_LOG} | head -n -1

---

Celui-ci prend 4 arguments en entrée:
Heure début,Heure fin,Date,fichier de log à parser.
Exemple:

Code:

---

parselog.sh 07 11 14/02/2013 fichier.log

---

Bon, je dois des excuses à Jack-ft, j'ai pas eu besoin d'utiliser awk :aie:

Cordialement.

Citation:

---

Envoyé par disedorgue

Bon, je dois des excuses à Jack-ft, j'ai pas eu besoin d'utiliser awk :aie:

---

Ah non! Je n'accepte pas d'excuses! (par principe, mais cette marge est trop étroite pour développer...) :P
Surtout que (dans le mode de pensée courant) je n'en mérite pas! :P

En effet, je pencherais plutôt pour une solution awk !!! :mouarf:

Pour plusieurs raisons:
- pour traiter le cas où l'heure de début n'apparaît pas: comme indiqué dans le dernier post, on demande les logs entre 9h et 11h, alors que les logs comportent (ou pas) une tranche [6h 8h45], puis [10h15 10h30] puis [12h15 14h00].
- pour la souplesse (je trouve l'arithmétique plus facile dans awk que (ce que je connais) dans sed)
- pour la lisibilité (pour un développeur habitué à toutes sortes de langages, awk est infiniment plus facile que sed!) :ccool:

Si j'avais un peu plus de disponibilité, j'écrirais bien le programme...
Je partirais d'un AEF tout simple, du même genre que celui que j'ai présenté et implémenté dans le post 12 de cet autre fil.

Sans vouloir être condescendant, je n'ai pas encore vu de code proposé par amazigh42 (autre celui que d'autres ont déjà écrit), ce qui fait j'ai assez peu confiance qu'il veuille/puisse exploiter ce lien...
Cela dit, je serais vraiment ravi de me tromper et qu'il nous le montre publiquement! :P
(vous ai-je dit que j'adorais les anacoluthes? ;) )

Bonjour,

La solution que je propose traite bien le cas où l'heure demandée n'existe pas dans le log.

Il faut juste le retravailler un peu pour "corriger" 2 cas particuliers:

1) Si l'heure de début est une heure inférieur à laquelle le fichier de log fait référence, la fabrication de la regex sera fausse.
2) Idem pour l'heure de fin.

Après, il faut juste du temps pour corriger, ce que je n'ai pas trop actuellement :)

Cordialement.