Discussion :

[lorenzo8769]

Bonjour à tous,

Je souhaite faire une recherche de plusieurs valeurs sur une page web (.json) et pour ça j’utilise un curl + grep + awk

Tout ça dans une boucle for afin de faire un echo vers un fichier que je m’envoi par mail.

Exemple:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
For i in ‘curl <a href="http://blabla" target="_blank">http://blabla</a> | grep bonjour | awk ‘{print $1}’´
Do
Echo $i >> fichier.txt
Done

Résultats:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
bonjour 1
bonjour 2
bonjour 3

Ma question était de savoir comment je pouvais intégrer une seconde boucle me permettant d’avoir ce genre de résultat:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
bonjour 1 - salut 1
bonjour 2 - salut 2
bonjour 3 - salut 3

Avez-vous une idée svp ?

Merci d’avance

Cordialement,
Laurent

[balkany]

Il doit y avoir des outils plus appropriés pour extraire des infos d'un .json, mais pour répondre à ta question, la boucle for et grep sont inutiles.
Il te suffit de faire

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

curl http://blabla | awk '/bonjour/{print $1}'

pour obtenir le même résultat (si je n'oublie rien).

De même, pour extraire un autre champ, gère ça directement dans awk.
Par exemple, si salut est dans le champ 2 :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

curl http://blabla | awk '($0 ~ "bonjour" && $0 ~ "salut"){print $1 " - " $2}'

--
Rq : il faudrait un autre séparateur que l'espace pour obtenir le résultat que tu montres dans ton post.

[lorenzo8769]

Merci pour ton retour.

Pour t’expliquer la page json, voici un exemple:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
  {
    "mint": 1,
    "geo": "Toto1",
    "ipaddr": "1.1.1.1",
  },
  {
    "mint": 2,
    "geo": "Toto2",
    "ipaddr": "2.2.2.2",
  },
  {
    "mint": 3,
    "geo": "Toto3",
    "ipaddr": "3.3.3.3",
  },

Je souhaiterais récupérer geo et ipaddr sur la meme ligne

Je pensais donc le faire dans une boucle

Laurent

[balkany]

Oui, c'est ce que je te disais, il vaudrait mieux utiliser un parser json, car il y a plein de trucs inutiles pour délimiter les champs dans ce type de fichiers, qui obligent à faire des traitements supplémentaires dans des outils généralistes comme awk.
Mais bon, si tu souhaites récupérer ce qu'il y a après geo et ipaddr comme je le suppose (et pas geo et ipaddr eux-mêmes), tu peux déjà faire

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk -F':' '$1 ~ "geo"{printf("%s",$2)} $1 ~ "ipaddr"{printf("%s\n",$2)}' fichier

qui te donnera

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
 "Toto1", "1.1.1.1",
 "Toto2", "2.2.2.2",
 "Toto3", "3.3.3.3",

Ensuite, il te reste à mettre en forme si tu veux te débarrasser des guillemets et virgules (ce qu'un parser json ferait de lui-même j'imagine).

[lorenzo8769]

Cool super, merci

Je testerais tout ça ;-)

[lorenzo8769]

Donc ça marche, merci beaucoup.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

 awk  '$1 ~ "geo"{gsub(/,/,"-")gsub(/"/,"");printf("%s",$2)} $1 ~ "ipaddr"{gsub(/"/,"")gsub(/,/,"---->");printf("%s\n",$2)}'

Résultats:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
Toto1-1.1.1.1---->
Toto2-2.2.2.2---->
Toto3-3.3.3.3---->

Après tout ça, je n'sais pas si il est possible d'y intégrer une commande ping ou traceroute pour mon champ "ipaddr" :-/