Discussion :

[jmelyn]

Bonjour,

Un autre exercice, rien que pour le fun ... Alors une petite histoire, malheureusement imaginaire:

La profession d'admin système est très masculine, mais il y a une exception très remarquable (et remarquée) dans le service, et j'ai l'impression que j'ai un ticket (gagnant?). Elle m'a posé une colle que j'aimerais bien résoudre brillamment : Voilà, elle m'a déposé un fichier texte (me proposant quelque chose!) dans le /tmp d'une de nos machines, mais il y en a des centaines... Elle me demande de lui montrer mon originalité dans la recherche de ce fichier mystérieux.

Les hypothèses:

• Les seules connexions autorisées sont à base de ssh, l'authentification est automatique (pas de mot de passe) entre tous les ordis.
• Un fichier /tmp/mystery.txt sur une machine.
• Un fichier sur ma machine /tmp/ticket.hosts avec la liste de tous les ordinateurs de la boîte.

Le résultat à obtenir:
Un script Bash /tmp/ticket.script qui me donnera le nom de l'ordi sur lequel est localisé le fichier mystère et plus car affinités. Par pitié, évitez de m'envoyer un script avec une boucle (for ou while) sur la liste des ordis, c'est trop banal pour une fille comme celle-là!

[N_BaH]

J'ai présumé que /tmp/ticket.hosts ne contient que la liste verticale des noms des machines accessibles par ssh sans mot de passe.

Une façon de faire :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
#!/bin/bash
 
fic="mistery.txt"
exec 3</tmp/ticket.hosts
 
function chercheMsg() {
      read host 0<&3
      test -z $host && exit 1
      cherche=$(ssh "$host" 'find /tmp -name '"$fic"'')
      if [ "${cherche##*/}" = "$fic" ]
         then
            mesgOK="$host"
      else
         chercheMsg
      fi
[ -n $mesgOK ] && echo "le message est sur : $mesgOK"
}
chercheMsg

Mais, j'ai un souci, car le script s'arrête dès qu'il a trouvé une occurrence...

Evidemment, dès que je colle un while, le message peut se trouver sur plusieurs ordinateurs, la liste des ordinateurs sur lesquels le message est présent peut être affichée.

[ripat]

Par pitié, évitez de m'envoyer un script avec une boucle (for ou while) sur la liste des ordis, c'est trop banal pour une fille comme celle-là!

Elle est curieuse ta sys admin! Elle a quelque-chose contre awk?

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

awk '{if(system("ssh " $0 " cat /tmp/mystery.txt >/dev/null 2>1")==0) print "Trouvé sur: ", $0}' /tmp/ticket.hosts

[jmelyn]

Quelques précisions:

• L'élégance est de mise: Je n'apprendrai rien à personne si je dis qu'une solution originale, surprenante mais claire ravira la miss. Puissance et douceur dans un même script... Ha... mais je m'égare.
• Je suppose qu'il n'y a qu'un fichier /tmp/mystery.txt sur une seule machine, donc inutile de chercher s'il en existe un autre.

À Ripat: on a les histoires (fantasmes?) qu'on peut, désolé si ça ne colle pas pour tout le monde. La commande awk n'est pas à délaisser, vu la puissance et la concision de son langage. Attention juste à la manière de l'utiliser.
À N_BaH: Ne te rends pas malade pour moi, à 03:07 tu as le droit de dormir! Mais ta solution utilisant la récursivité est très intéressante.

[ripat]

[*]Je suppose qu'il n'y a qu'un fichier /tmp/mystery.txt sur une seule machine, donc inutile de chercher s'il en existe un autre.

Dans ce cas, un petit exit si trouvé et, tant qu'à faire, un ConnectTimout sur le flux ssh pour accélérer le traitement des tentatives sur des machines éteintes.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
awk '{
	if(system("ssh -o \"ConnectTimeout 2\" " $0 " cat /tmp/mystery.txt >/dev/null 2>1")==0)
		print "Trouvé sur: ", $0
		exit 0
}' /tmp/ticket.hosts

[matafan]

Avec xargs :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

xargs -a /tmp/ticket.hosts -n 1 -I X ssh X "[ -e /tmp/mystery.txt ] && echo X"

Mais bon, je pense que la solution triviale avec une boucle est à la fois la solution la plus consise, la plus souple, et la plus élégante.

[N_BaH]

Version allégée :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
#!/bin/bash
 
fic="mistery.txt"
exec 3</tmp/ticket.hosts
 
function chercheMsg() {
   read hOte 0<&3 || exit 1
   ssh "$hOte" "[ -e /tmp/$fic ] && echo "$fic trouvé sur $hOte"" ||\
   chercheMsg
}
 
chercheMsg

[jmelyn]

Voici ma solution. Les explications viendront avec le résumé de toutes les solutions proposées. Le script suivant s'appelle ticket.script.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
#!/bin/bash
 
[[ -f /tmp/mystery.txt ]] && { hostname -s; exit; }
hostNext=$(head -n 1 /tmp/ticket.hosts)
[[ -z $hostNext ]] && exit
sed -i '1d' /tmp/ticket.hosts
scp -q -p /tmp/ticket.* $hostNext:/tmp
ssh -q $hostNext "/tmp/ticket.script; rm -f /tmp/ticket.*"

[matafan]

Ah ben ouais mais non, t'as jamais dit que chacun des noeuds avait un accès ssh vers chacun des autres noeuds.

[jmelyn]

Bonjour Matafan,

Je croyais l'avoir dit dans le post initial par:

[...] l'authentification est automatique (pas de mot de passe) entre tous les ordis.

Je voulais dire que chaque ordi a accès par ssh à tous les autres de manière transparente. C'est justement un point essentiel de l'originalité. Désolé si ce n'était pas clair, je ferai encore plus attention la prochaine fois.

Tu peux toujours proposer une autre solution, je crois que la mienne peut encore être optimisée: j'ai deux appels ssh par machine (scp et ssh). Tu dois bien avoir quelque chose dans ta boîte à idées...

[Qwert]

Bonjour,

Un autre exercice, rien que pour le fun ... Alors une petite histoire, malheureusement imaginaire:

La profession d'admin système est très masculine, mais il y a une exception très remarquable (et remarquée) dans le service, et j'ai l'impression que j'ai un ticket (gagnant?). Elle m'a posé une colle que j'aimerais bien résoudre brillamment : Voilà, elle m'a déposé un fichier texte (me proposant quelque chose!) dans le /tmp d'une de nos machines, mais il y en a des centaines... Elle me demande de lui montrer mon originalité dans la recherche de ce fichier mystérieux.

Les hypothèses:

• Les seules connexions autorisées sont à base de ssh, l'authentification est automatique (pas de mot de passe) entre tous les ordis.
• Un fichier /tmp/mystery.txt sur une machine.
• Un fichier sur ma machine /tmp/ticket.hosts avec la liste de tous les ordinateurs de la boîte.

Le résultat à obtenir:
Un script Bash /tmp/ticket.script qui me donnera le nom de l'ordi sur lequel est localisé le fichier mystère et plus car affinités. Par pitié, évitez de m'envoyer un script avec une boucle (for ou while) sur la liste des ordis, c'est trop banal pour une fille comme celle-là!

Ca sent surtout : faites mes devoirs

[matafan]

Désolé si ce n'était pas clair, je ferai encore plus attention la prochaine fois.

Non c'est moi, j'ai pas fais attention

[N_BaH]

jmelyn,

Je n'ai pas de machines sans mot de passe pour ssh, je ne peux donc pas tester ton script.
Cependant, à sa lecture, il me semble que la commande `hostname -s` est éxécutée sur l'ordinateur sur lequel est trouvé mistery.txt... Mais alors, comment récupères-tu l'info sur ton poste ?

[jmelyn]

Solution de N_BaH
==============
L'idée générale du script est de se connecter séquentiellement sur chaque ordinateur et de tester si le fichier /tmp/mystery.txt est bien présent.

Le premier problème est de lire le fichier sans utiliser de boucle (for ou while). Si l'on utilise le code read variable < fichier, alors variable est initialisée avec la première ligne de fichier... puis ce dernier est refermé. Si l'on appelle une seconde fois la commande, ce sera à nouveau la première ligne qui sera lue. La boucle permet justement de garder le fichier ouvert et de lire les lignes les unes après les autres. Pas de boucle, pas de chocolat! Pour contourner le problème, N_BaH, qui semble particulièrement à l'aise avec les redirections, ouvre le fichier et envoie son contenu dans le file-descriptor 3 qui reste ouvert! Il suffit alors de lire le file-descriptor 3 pour lire le fichier ligne après ligne.

Le second problème est de se connecter séquentiellement sur chaque ordi sans boucle. Ici, c'est la récursivité qui est utilisée: la fonction de connexion et de recherche s'appelle elle-même pour tester l'ordinateur suivant. Une fois le fichier trouvé (ou tous les ordinateurs testés), on sort de toutes ces boucles imbriquées.

Réalisation
Les guillements de la ligne ssh ne sont pas correctement placés. Ceux en rouge sont inutiles:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

ssh "$hOte" "[ -e /tmp/$fic ] && echo "$fic trouvé sur $hOte"" || chercheMsg

En effet: $hOte ne peut pas comporter de blanc (guillemets inutiles), et la commande echo "..." est déjà dans des guillemets.
On remarque aussi la structure:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

[ test ] && commande_oui || commande_non

qui est équivalente à:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
if [ test ]
then
  commande_oui
else
  commande_non
fi

C'est nettement plus compact!

Solution de ripat
============
L'idée générale est la même que N_BaH: connexions séquentielles aux ordinateurs pour recherche du fichier /tmp/mystery.txt.

La commande awk est particulièrement adaptée pour lire les fichiers ligne à ligne et exécuter unprogramme pour chacune d'entre-elles. La boucle est intégrée à la commande awk!

Réalisation
La commande system de awk permet d'accéder à n'importe quelle commande extérieure à awk. Ici, c'est l'appel à ssh. Attention toutefois au test de présence du fichier: D'abord, il est plus simple d'écrire cat fichier >& /dev/null que cat fichier > /dev/null 2>1. Et tant qu'à faire, le test [ -f fichier ] donnera le même résultat.

Solution de Matafan
===============
Toujours le même principe d'appeler les ordinateurs en séquence à partir d'un point central.

Réalisation
Elle est particulièrement compacte en utilisant la commande xargs: celle-ci extrait chaque ligne du fichier d'entrée (option -a fichier), la nomme X (option -I X), puis lance la commande ssh utilisant X comme paramètre. L'option -n 1 est inutile (lecture ligne par ligne par défaut), par contre l'option -P 0 aurait été très intéressante puisqu'elle tente de paralléliser les commandes effectuées pour chaque ligne.

Solution de jmelyn
==============
Le principe est différent: À la place d'appeler les ordinateurs d'un point central, chaque ordinateur interrogé appelle le suivant jusqu'à trouver celui qui contient le fichier. C'est ce qu'a repéré matafan.

Le processus se divise en deux tâches: Premièrement transférer les deux fichiers (script et liste des ordis). Cela est fait par la commande scp, basée sur ssh. Mais auparavant, la liste des ordis est mise à jour (un ordi de moins à chaque fois) grâce à sed. Et deuxièmement exécuter le script juste transféré, grâce à ssh. C'est également une sorte de récursivité, sauf que le script s'appelle sur des machines différentes.

Réalisation
J'aurais aimé assigner la variable hostName et faire le test dessus en une seule ligne. Une idée?
J'aurais aimé faire la copie des fichiers (scp) et l'exécution de script (ssh) par un seul canal ssh, dans une seule commande. Une autre idée?

Merci à tous pour vos contributions. J'apprends hénaurmément.

[jmelyn]

jmelyn,

Je n'ai pas de machines sans mot de passe pour ssh, je ne peux donc pas tester ton script.
Cependant, à sa lecture, il me semble que la commande `hostname -s` est éxécutée sur l'ordinateur sur lequel est trouvé mistery.txt... Mais alors, comment récupères-tu l'info sur ton poste ?

En fait, la commande ssh renvoie stdout et stderr à l'appelant. S'il y a une chaîne d'appelants, les sorties remontent jusqu'au premier. Et ça marche!

[N_BaH]

jmelyn,

J'aime bien ton dée de 'mobileAgent' !

Je ne comprend pas :
Je vais faire le relou, mais une fois que ce sera entrer, ce sera ancrer ^^

la commande ssh renvoie stdout et stderr à l'appelant

l'appelant est, à chaque saut, l'ordi précédent...?

----

assigner la variable hostName et faire le test dessus

avec sed, mettre à jour la ligne du script qui contient cette variable...?

[jmelyn]

Bonjour,

Il n'y a pas de relou qui compte, je n'ai pas utilisé les bons mots. Si je travaille directement sur ordi_0 et je fais ssh ordi_1 puis ls, alors je vois la sortie de la commande. Si, depuis ordi_1, je tape ssh ordi_2 puis ls, je vois toujours la sortie de la commande exécutée sur ordi_2 (et je travaille toujours sur ordi_0). Et ainsi de suite: En travaillant toujours depuis ordi_0, si je suis connecté sur ordi_n et tape ls, la sortie transite par chaque ordi (ordi_n-1, ordi_n-2,..., ordi_2, ordi_1) pour finalement arriver sur ma console sur ordi_0. Dans le script il y a un appel ssh vers l'ordi suivant, donc le retour se fait vers l'ordi actuel, mais lui-même est exécuté par ssh depuis l'ordi précédent, donc la sortie est envoyée vers celui-ci... etc, etc, etc... C'est de la récursivité distribuée.

Pour la variable hostNext, les actions suivantes sont à effectuer:

1. 1e ligne du fichier (/tmp/ticket.hosts) vers la variable hostNext
2. vérification que c'est pas fini (plus rien dans hostNext)
3. 1e ligne du fichier supprimée, puisque traitement en cours du host

Je voudrais au moins faire les points 1. et 2. en une seule commande, dans un if par exemple.
Le fichier de données (ticket.hosts) est différent du fichier de script (ticket.script). Ce dernier n'est jamais modifié. J'ai essayé de tout mettre dans un seul fichier, mais c'est nettement plus complexe comme traitement.