Moteur html+javascript en ligne de commande

Version imprimable

09/05/2012, 16h59
grav

Moteur html+javascript en ligne de commande

Bonjour,

Je voudrais récupérer le dom d'une page html en php au moyen d'une librairie.
Je précise que j'ai besoin que tout le code javascript lancés au démarrage de la page html soit exécuté! Ce code modifie le dom et j'ai besoin de récupérer ces infos.

En gros il me faudrait un navigateur en ligne de commande qui me retourne en texte le code de la page html modifiée par le javascript au démarrage

Vous avez des pistes?

Merci

Essai avec

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
 
function get($url,$post_fields = null)
	{
		$ch = curl_init($url);
 
		$ua = 'User-Agent: Mozilla/4.0 (compatible; MSIE 5.01; Widows NT)';
		curl_setopt($ch, CURLOPT_URL, $url);
		curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
		curl_setopt($ch, CURLOPT_USERAGENT, $ua);
 
		curl_setopt ($ch, CURLOPT_HEADER, 1);
		curl_setopt ($ch, CURLOPT_SSL_VERIFYPEER, 0);
		curl_setopt ($ch, CURLOPT_SSL_VERIFYHOST, 0);
 
		if($post_fields != null)
		{
			curl_setopt($ch, CURLOPT_POST, 1);
			curl_setopt($ch, CURLOPT_POSTFIELDS, $post_fields);
		}
		$result = curl_exec($ch);
		$dom = new DOMDocument();
		@$dom->loadHTML($result);
		curl_close($ch);
		sleep(1);
		return $dom;
	}

Une fonction que j'ai déjà utilisé qui récupère l'HTML de la page appelé.
pour en savoir sur les paramètres du cURL regarde la documentation officiel.

Merci pour ta réponse. Malheureusement j'ai fait le test et curl ne m’exécute pas le code javascript.
exemple d'un page html que je veux parser avec curl:
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 <html> <script> function init() { var p=document.createElement('p'); p.id='b'; p.innerHTML='bbbbbb'; document.body.appendChild(p); } </script> <body onload="init()"> <div id="a">aaaaaa</div> </body> </html>
Quand je lis cette page avec curl, l'élément p avec l'id='b' n'est pas créé et non disponible.

Il me faudrait un moteur qui interprète le javascript de la page avant de me donner le résultat

10/05/2012, 15h24
stealth35

En PHP seul c'est pas possible
10/05/2012, 15h42
grav

J'ai trouvé des moteurs javascript pour php:

http://php.net/manual/en/book.v8js.php
http://pecl.php.net/package/spidermonkey
http://j4p5.sourceforge.net/

J'utilise déjà le dernier, pour d'autres projets, car il a l'avantage d'être en pur php.
En revanche ces moteurs ne font pas également interpréteur html. Je ne peux leur donnée une page HTML avec du javascript, seulement du javascript pur.

Il me faudrait vraiment un browser en ligne de commande, mais je désespère un peu de le trouver. Je crois que je vais contourner le problème mais cela va être plus difficile.

Si quelqu'un peut m'offrir un dernier espoir...
10/05/2012, 15h44
stealth35

c'est juste des moteurs javascript donc ça ne marchera pas non plus

tu dois pourvoir faire ça avec PhantomJS
11/05/2012, 09h46
grav

Très prometteur!!!

J'essaie tout de suite et je vous tiens au courant!

Un grand merci pour ce lien!