Discussion :

[zeiitoun]

Bonjour,
J'aurai besoin d'un petit coup de pouce !

Je cherche à compter le nombre de div d'une page web, mais ces div sont générées par du js, donc invisible dans le code source ...
J'utilise donc cURL pour contourner le truc et récupérer la page, puis je transforme mon résultat en objet DOM (simple_html_dom) pour chercher la div générée .. mais elle est pas présente.

Ma fonction cURL :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
function dlPage($link) {
    $curl = curl_init();
    curl_setopt($curl, CURLOPT_SSL_VERIFYPEER, FALSE);
    curl_setopt($curl, CURLOPT_HEADER, false);
    curl_setopt($curl, CURLOPT_FOLLOWLOCATION, true);
    curl_setopt($curl, CURLOPT_URL, $link);
    curl_setopt($curl, CURLOPT_REFERER, $link);
    curl_setopt($curl, CURLOPT_RETURNTRANSFER, TRUE);
    curl_setopt($curl, CURLOPT_USERAGENT, "Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US) AppleWebKit/533.4 (KHTML, like Gecko) Chrome/5.0.375.125 Safari/533.4");
    $str = curl_exec($curl);
    curl_close($curl);
    $dom = new simple_html_dom();
    $dom->load($str);
    return $dom;
}

Et ma ligne de code :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
 
foreach(dlPage($value)->find("div.box-server") as $serveur){
    $nbr++;
}

Sauf que j'suis toujours à 0 au final. J'arrive pourtant à chercher des div que j'vois dans le code source . . .

Vous des idées ?

PS : en gros, est-ce possible de récupérer code source après exécution du javascript en php ?

[iakou]

Bonjour.

Je cherche à compter le nombre de div d'une page web, mais ces div sont générées par du js, donc invisible dans le code source ...

Vous pouvez néanmoins les compter lors de leur création, et passer ce paramètre en POST (champ hidden d'un FORM), ou en GET, voire même en variable JS si votre page est une IFrame ou une Frame...

en gros, est-ce possible de récupérer code source après exécution du javascript en php ?

Non ! Faites un clic droit sur une page où du javascript vient de générer des objets !... D'ailleurs vous l'avez vous-même dit !...

Sans parler de code que voulez-vous faire exactement ???...

[Watilin]

Zeiitoun, ce dont tu as besoin c'est d'un environnement capable de faire tenir ensemble une page Web et un moteur JavaScript.
Actuellement tu as cURL qui te permet d'obtenir le code source des pages Web, mais il est incapable d'interpréter le JavaScript.

Pour compter le nombre de divs générées, ce n'est pas gagné, mais tu as plusieurs pistes à explorer.

1. Si le JavaScript de la page en question n'est pas trop compliqué, tu peux tenter de créer un script PHP pour en analyser le code source, et en déduire le nombre de divs qu'il est censé générer. Mais cette méthode atteint vite ses limites.

2. Si tu peux installer des logiciels sur ton serveur, installe un navigateur, et ensuite essaye de le lancer depuis un script PHP et de récupérer des informations en retour. Par exemple avec Greasemonkey ou Tampermonkey, il est facile de bricoler un bout de JavaScript qui compte les divs et qui les écrit dans un fichier.

3. Dans le cas où tu n'aurais pas la possibilité ou l'envie de modifier la config de ton serveur, tu peux utiliser une autre machine avec un navigateur et un monkey comme en 2., mais qui envoie des requêtes (Ajax ou pas) à ton serveur pour lui envoyer les informations. Attention dans ce cas à sécuriser un minimum pour ne pas recevoir des informations erronnées de la part de petits malins

[Bovino]

Il existe Intégration du moteur Javascript V8 qui peut t'aider à la rigueur.