Discussion :

[piotr]

Bonjour à tous!

Je cherche à faire un script perl permettant de récupérer les données de la source DOM d'un document.
Avec Mozilla, avec un clic de souris j'arrive à faire afficher la source, j'ai quelquechose du style:
<ul> <li class style="price">....
si je fais un simple affichage du code source avec IE je ne vois pas ces données, par contre en les sélectionnant avec la souris sous Mozilla puis en cliquant sur afficher la source DOM, je peux voir les données qui m'intéressent.

Qui pourrait m'aiguiller sur la voie?

[PerlPicker]

Je ne suis pas sur de comprendre ce que tu veux

Si tu souhaites récupérer le source d'une URL, LWP:Simple permet de le faire très simplement.

[piotr]

Je ne suis pas sur de comprendre ce que tu veux

Si tu souhaites récupérer le source d'une URL, LWP:Simple permet de le faire très simplement.

En fait dans le site il y a du javascript, ce qui fait que je n'arrive pas à récupérer les données issu du formulaire

[PerlPicker]

Ok, je comprends maintenant

Une recherche rapide sur perlmonks semble indiquer qu'il n'y a pas de solution simple ...

Je vois 2 solutions possibles mais je ne suis pas un expert:

- Le javascript fait des choses simples (fetch, redirect ...). Tu analyzes les échanges avec le serveur avec un plugin comme Live HTTP Headers (conseil des Monks) et tu reproduis le résultat en Perl
- Tu pilote directement le browser (IE par exemple avec WIN32::OLE, WIN32::IEautomation ?) pour faire le crawling. Pas très simple non plus

J'espère que quelqu'un a une meilleure solution. Ca m'intéresse!

[piotr]

J'ai avancé un peu dans mon pb, alors j'ai observé qu'avec l'extension Web-developer de mozilla on pouvait afficher dans le fichier source de la page de résultat de la requête (alors qu'elle n'apparait pas sans cette extension). Il me faudrait donc enregistrer cette page.
Pour afficher la source je procède comme suit:
Je vais dans oultils/Web-developer/View Source/View Generated Source
J'obtiens une nouvelle fenêtre et je dois aller dans Fichier/Enregistrer sous

Quelqu'un a -t il une idée pour automatiser ça avec Mozilla?

[piotr]

J'ai résolu mon pb, en fait j'utilise le soft autoit pour faire la manip et ça va tout seul.