Obtenir tout le document résultant d'un wget

Version imprimable

11/06/2016, 08h46
tintinux

Obtenir tout le document résultant d'un wget

Bonjour

Sous Ubuntu 14.4 je fais :

Code:

wget --output-document=/tmp/resultat.html http://unsite/unscript.php

Je voudrais ensuite exploiter le document produit pour savoir si tout c'est bien passé.

En mode ligne de commande, pas de problème.
Mais dans un script bash, après le wget, le fichier html n'est pas complet, il ne comporte que ses 2 premières lignes (tag HEAD et tag BODY non fermé)
Il ne semble donc pas avoir été complètement écrit sur le disque.

C'est pareil avec

Code:

RESULT="`wget -qO- http://unsite/unscript.php`"

et en examinant le contenu de la variable $RESULT

Que puis-je faire pour obtenir le résultat complet ?
Merci pour votre aide !
11/06/2016, 09h07
Jipété

Salut,

est-ce que ce problème ne serait pas lié au fait que wget étant non-interactif (cf. man wget), l'exécution du script continue à la ligne suivante juste après le lancement de la commande wget..., résultat les données sont loin d'avoir été toutes récupérées ?

Auquel cas, il faudrait récupérer le pid de wget lors de son lancement et faire une boucle d'attente tant que ce pid existe.
Enfin, c'est ce que je tenterais.

On peut attendre d'autres avis.
11/06/2016, 09h58
jlliagre

@Jipété : wget ne rends la main qu'après avoir terminé.

@Tintinux : Il n'y a pas de raison pour que ta commande ne fonctionne pas. Est-ce que tu as le même problème en récupérant d'autres URLs ?
11/06/2016, 13h07
tintinux

Citation:

Envoyé par jlliagre

Il n'y a pas de raison...

Bon, il devait y avoir autre chose car en réessayant je n'ai plus le problème.
Merci de m'avoir confirmé...
11/06/2016, 17h07
Flodelarab
Bonjour :coucou:

Ce premier message suscite de nombreux commentaires.

Citation:

Code:

RESULT="`wget -qO- http://unsite/unscript.php`"
- Utiliser la variable tout en majuscule est maladroit puisque ce sont les variables d'environnement qui sont en majuscules.
- Les doubles quotes en servent à rien.
- `` est équivalent à $( )
- Tout est fichier. Donc vouloir rentrer un fichier dans une variable est un mauvais reflex à bannir.
11/06/2016, 20h14
jlliagre

Citation:

Envoyé par Flodelarab

Utiliser la variable tout en majuscule est maladroit puisque ce sont les variables d'environnement qui sont en majuscules.

Rien ne dit que RESULT n'est pas une variable d'environnement.

Citation:

Envoyé par Flodelarab

Les doubles quotes en servent à rien.

C'est vrai, mais ce n'est pas très grave.

Citation:

Envoyé par Flodelarab

`` est équivalent à $( )

C'est vrai, mais ça n'a pas d'impact non plus sur le code. Remplacer les `` par $() est néanmoins un bon conseil que je fais souvent.

Citation:

Envoyé par Flodelarab

Tout est fichier. Donc vouloir rentrer un fichier dans une variable est un mauvais reflex à bannir.

Tout n'est pas fichier, une variable, justement, n'est pas un fichier ;)