Discussion :

[laliemendez]

Bonjour à tous

Je possède une fichier texte contenant plusieurs mots (pour l'exemple, simplement des lettres)

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
#fichier_test.txt
a b c d e f g h i j k l m

Je cherche a faire des traitement (pour l'exemple, un simple affichage) selon les motifs trouvés.
A savoir qu'il faut absolument une combinaison de motifs (l'ordre et la case n'ont pas d'importance) d'ou l'utilisation de awk qui permet d'utiliser l'opérateur ET

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
#!/bin/bash
FichierDeTest="fichier_test.txt"
 
# Je chercher le motif 1 ET le motif 2
TestPresence_a_b=$(awk '/a/ && /b/' fichier_test.txt)
 
#Si la variable n'est pas vide (== résultat de awk), la chaine est trouvé
if [ -n "$TestPresence_a_b" ] ; then
	echo "La chaine a b est présente"
fi
 
# Je chercher le motif 1 ET le motif 2 ET le motif 3
TestPresence_c_e_f=$(awk '/c/ && /e/ && /f/' fichier_test.txt)
 
#Si la variable n'est pas vide (== résultat de awk), la chaine est trouvé
if [ -n "$TestPresence_c_e_f" ] ; then
	echo "La chaine c e f est présente"
fi
 
# etendre à d'autres cas, exemple 
#g h i
#l m

Pour l'exemple, je n'en ait mis que deux, mais je dois en avoir plus.
Seulement, mon code se répéte déjà donc je cherche à faire quelque chose de plus générique. Je me demande si je peut créer une struture qui ressemble au Case If

Merci d'avance de vos suggestions.


Ajout de précisions


J'apporte quelques précisions à ma demande

- je recherche bien des motifs qui sont des mots-clés

- je dois avoir une 50 aine de cas à traiter, qui peuvent avoir certains mots en commun (et non pas la totalité), par exemple a b ; a d e ; c e f; ...
Je dois donc chercher entre 2 et 4 mots-clés pour chaque cas.

- quand je trouve une combinaison de mots-clés, je doit renvoyer une sorte de définition donc du texte. On peut considérer que c'est une sorte de dictionnaire avec, en entrée, des mots-clés dont l'ordre importe peu.

- j'ai d'abord testé par grep avec le | mais le comportement était un OR et pas un AND. Peut-être me suis-je trompé dans la syntaxe ?

[al1_24]

Une petite fonction ?
En entrée le fichier et les motifs cherchés
En sortie, 0 si tous les motifs sont trouvés, 1 sinon
Affichage des lignes correspondant au résultat
Seule contrainte : utilise deux fichiers temporaires

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
function  CherchePattern
{ cp "$1" fic_tmp
  # Boucler sur les motifs
  for pattern in "$@"
  do
    if [ -n "$pattern" ]
    then
      # Réduire le fichier de travail aux lignes trouvées
      grep "$pattern" fic_tmp > fic_res
      cp fic_res fic_tmp
    fi
    # Si aucune ligne, inutile de continuer
    [ -s fic_tmp ] && break
  done
  # Récupérer le résultat et l'afficher
  [ -s fic_tmp ] && Rc=1 || Rc=0
  cat fic_tmp
  rm -f fic_tmp fic_res
  return $Rc
}

Il y a certainement matière à optimiser

[BufferBob]

salut,

effectivement faire une fonction est sans doute une bonne idée, par contre on sait pas si le traitement est identique à chaque fois ou non etc.
on peut partir sur awk par contre on perd la notation regex && regex ça ne passe pas, en revanche on peut contourner le problème avec la fonction match() au sein d'une boucle :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
#!/bin/bash
 
function multigrep(){
  fichier="$1"; shift 1
  expression="$@"
  res=$(awk -vu="$expression" '
  BEGIN{
    n = split(u, t, / AND /);    # on crée le tableau t sur la base de lexpression u passée en paramètre
  }
  $0 ~ t[1] {                    # la ligne quon recherche matchera forcement au moins le premier element du tableau
    for(i = 2; i < n+1; i++) {
      if (!match($0, t[i])) {    # si au moins un des autres elements ne match pas cest que la ligne nest pas bonne
        next;
      }
    }
    print                        # sinon on a trouvé une ligne valable et on laffiche
  }' $fichier)
  echo "----------------"
  if [ -n "$res" ]; then
    echo "trouvé (expression = \"$expression\") :"
    echo "$res"
    return 0
  else
    echo "not trouvé (expression = \"$expression\")"
    return 1
  fi
}
 
multigrep fichier "alpha"
multigrep fichier "bravo AND charlie"
multigrep fichier "foxtrott AND echo AND charlie"
multigrep fichier "pouet"

et le résultat :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
----------------
trouvé (expression = "alpha") :
alpha bravo charlie
echo alpha charlie foxtrott
alpha
----------------
trouvé (expression = "bravo AND charlie") :
alpha bravo charlie
bravo charlie foxtrott
----------------
trouvé (expression = "foxtrott AND echo AND charlie") :
echo alpha charlie foxtrott
----------------
not trouvé (expression = "pouet")

nb: la notation choisie machin AND truc est totalement cosmétique
nb2: c'est une approche pas du tout optimisée, pour chaque expression recherchée on lit l'intégralité du fichier

[N_BaH]

Bonjour,

sur awk par contre on perd la notation regex && regex ça ne passe pas

comment fais-tu ? ça devrait ne pas poser de problèmes.

[BufferBob]

comment fais-tu ? ça devrait ne pas poser de problèmes.

ben je vois pas trop comment, l'idée ce serait de passer awk -vTOTO="/regex1/ && /regex2/" 'TOTO {action}' fichier, passer une simple regex je dis pas, mais passer une expression complète j'ai pas l'impression qu'on puisse...

[N_BaH]

BufferBob : vu comme ça, en effet.

Pour l'exemple, je n'en ait mis que deux, mais je dois en avoir plus.

il faut détailler ton projet : est-ce fixe ? est-ce variable ? est-ce paramétrable ?...

[BufferBob]

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
# Je chercher le motif 1 ET le motif 2
TestPresence_a_b=$(awk '/a/ && /b/' fichier_test.txt)
(...)
# Je chercher le motif 1 ET le motif 2 ET le motif 3
TestPresence_c_e_f=$(awk '/c/ && /e/ && /f/' fichier_test.txt)
(...)
# etendre à d'autres cas, exemple 
#g h i
#l m

moi ça me paraissait assez clair au contraire, il cherche n motifs dans le fichier, c'est pour ça qu'il voulait se reposer sur la syntaxe /regex1/ && /regex2/ && ... /regexn/ de awk, tout le propos étant de passer l'expression de manière dynamique

si on connait n à l'avance c'est facile effectivement de s'en sortir avec un grep | grep | grep, mais si n est variable on est coincé

[laliemendez]

Bonjour

J'apporte quelques précisions à ma demande

- je recherche bien des motifs qui sont des mots-clés

- je dois avoir une 50 aine de cas à traiter, qui peuvent avoir certains mots en commun (et non pas la totalité), par exemple a b ; a d e ; c e f; ...
Je dois donc chercher entre 2 et 4 mots-clés pour chaque cas.

- quand je trouve une combinaison de mots-clés, je doit renvoyer une sorte de définition donc du texte. On peut considérer que c'est une sorte de dictionnaire avec, en entrée, des mots-clés dont l'ordre importe peu.

- j'ai d'abord testé par grep avec le | mais le comportement était un OR et pas un AND. Peut-être me suis-je trompé dans la syntaxe ?

[BufferBob]

salut,

- quand je trouve une combinaison de mots-clés, je doit renvoyer une sorte de définition donc du texte. On peut considérer que c'est une sorte de dictionnaire avec, en entrée, des mots-clés dont l'ordre importe peu.

si on a :

• la ligne "alpha bravo charlie delta echo"
• le cas n°28 "alpha AND bravo"
• le cas n°42 "alpha AND bravo AND charlie"
• le cas n°49 "bravo AND charlie"

que doit faire le programme, identifier les 3 cas distincts, identifier uniquement le premier cas rencontré (le cas n°28), identifier le cas avec un maximum de motifs trouvés ("alpha AND bravo AND charlie"), autre ?

[N_BaH]

Gawk possède une structure

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
              switch (expression) {
              case value|regex : statement
              ...
              [ default: statement ]
              }

[laliemendez]

Gawk possède une structure

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
              switch (expression) {
              case value|regex : statement
              ...
              [ default: statement ]
              }

Pas encore eut le temps de tester (les priorités du lundi matin qui changent ... )
Mais visuellement, cela a l'air de répondre à mon besoin.

Je testerai et je dirai ce qu'il en est

[BufferBob]