Probleme parsing site web

**dumbl** · 16/01/2014, 22h31

Hello les geeks ! ça code?

J'ai un ptit programme java qui essaie de parser une page web à l'aide de JSoup.
Mais j'ai un problème ça ne fonctionne pas comme d'habithude, je m'explique :
Pour me parser la page comme d'habithude je fais :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
Document doc;
doc=Jsoup.connect("http://www.xxx.com").get();
System.out.println(doc.text());

Le problème est que ce code m'affiche tout de la page web sauf ce dont j'ai besoin. Je présume que le site protège ses données contre le parsing html, pourtant les données que j'ai besoin sont bien présente à la lecture du HTML avec l'inspecteur d'element de mon google chrome.
Donc je me demande comment le site fait-il pour se protéger, et bien sur comment récupérer quand même les données dont j'ai besoin

Merci
A+

Dumbl

**joel.drigo** · 16/01/2014, 22h36

Salut,

C'est peut-être une page avec des parties générées dynamiquement, avec du javascript dans le onLoad(), voire des requêtes AJAX. JSOUP est un parser html, mais il n'exécute pas le javascript !

**dumbl** · 16/01/2014, 22h57

Merci pour ta reponse.

En effet je vois un <body onload="initiate()">

Et plus bah un script avec une fonction qui semble à l'origine des données.
Je vais donc regarder l'Ajax, je te tiens au courant.

Probleme parsing site web

Java

Discussions similaires

Partager

Partager