Comment récupérer plusieurs pages web en changeant une variable dans l'URL

Bonjour,

J'utilise l'API Mediawiki pour récupérer le contenu de Wikipedia et du Wiktionnaire. Pour cela j'utilise une URL qui a des paramètres.
Pour récupérer une page web, j'ai utilisé curl et j'ai décodé le JSON afin d'avoir les valeurs du fichier. La valeur en question s'appelle "cmcontinue" et c'est la valeur de celle-ci qui permet de passer à la page suivante.
Je n'arrive qu'à récupérer une seule page, y a un problème avec cette variable, dans les fichiers JSON j'ai la même structure et les mêmes noms de variables du coup, il retient toujours la première valeur.
Comment faire dans ce cas-là ?

Quand je modifie cmcontinue = array() puis cmcontinue[], j'ai des erreurs et je reste toujours à la première page.

Code :

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45

<?php $cmcontinue= NULL;   do { $wikipediaURL = "https://fr.wiktionary.org/w/api.php?action=query&list=categorymembers&cmtitle=Category:Verbes_en_fran%C3%A7ais&utf8&cmprop=title&utf8&prop=extracts&cmlimit=500&format=json&cmcontinue=".$cmcontinue; $ch = curl_init(); // 1) Initialiser cURL curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, FALSE); /*-----------Prise en charge des SSL ----------*/ curl_setopt($ch, CURLOPT_URL, $wikipediaURL); // 2) Fournir à cURL l'URL de la page à récupérer curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); // 3) On lui demande de nous rerourner la page curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);     /*------------------- Enregristrer le contenu de la page dans un fichier ------------------------*/   $fichier = fopen("example.json", "a+");   curl_setopt($ch, CURLOPT_FILE, $fichier); curl_setopt($ch, CURLOPT_HEADER, 0);   $resultat = curl_exec ($ch); // 4) Exécuter la req qui retourne le contenu de la page dans un TAB         curl_close($ch); // 5) On ferme la connexion à cURL   echo $resultat;   //-------------Récupérer le cmcontinue -----------*/ // Parser le json avec une simple fonction $json = file_get_contents("example.json"); //var_dump(json_decode($json)); $parsed_json = json_decode($json);   $cmcontinue = $parsed_json->{'continue'}->{'cmcontinue'}; echo "\n le cmcontinue est \n".$cmcontinue; } while ($cmcontinue != NULL); $cmcontinue = $parsed_json->{'continue'}->{'cmcontinue'}; echo "\n le cmcontinue est \n".$cmcontinue; fclose($fichier);   ?>

---

Merci

indiquez nous ce que donne l'affichage de ces variables et ce qu'elle devrait contenir pour que ça fonctionne

Citation:

---

Envoyé par mathieu

indiquez nous ce que donne l'affichage de ces variables et ce qu'elle devrait contenir pour que ça fonctionne

---

Merci pour votre réponse.
Voilà la structure du cmcontinue :

Code:

---

{"batchcomplete":"","continue":{"cmcontinue":"page|4149444552|778","continue":"-||extracts"},"query":{"categorymembers":[{"ns":100,"title":"Annexe:Structure des verbes en français"},{.......

---

J'ai corrigé l'erreur, le cmcontinue est bien un tableau. Toutefois, je récupère à chaque fois la même page (la 1ère page), je ne récupère jamais les pages suivantes. Y a une erreur dans condition, je ne sais pas quelle devra être la condition. J'ai mis, tant que je ne suis pas à la fin du tableau cmcontinue :(
Code :

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51

<?php   $cmcontinue= array(); $i=0; $wiktionnaireURL = NULL; do {   $wiktionnaireURL = "https://fr.wiktionary.org/w/api.php?action=query&list=categorymembers&cmtitle=Category:Verbes_en_fran%C3%A7ais&utf8&cmprop=title&utf8&prop=extracts&cmlimit=500&format=json&cmcontinue=".$cmcontinue[$i];   $ch = curl_init(); // 1) Initialiser cURL curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, FALSE); /*-----------Prise en charge des SSL ----------*/ curl_setopt($ch, CURLOPT_URL, $wiktionnaireURL); // 2) Fournir à cURL l'URL de la page à récupérer curl_setopt($ch, CURLOPT_RETURNTRANSFER, true); // 3) On lui demande de nous rerourner la page curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);     /*------------------- Enregristrer le contenu de la page dans un fichier ------------------------*/   $fichier = fopen("example.json", "a+");   curl_setopt($ch, CURLOPT_FILE, $fichier); curl_setopt($ch, CURLOPT_HEADER, 0);   $resultat = curl_exec ($ch); // 4) Exécuter la req qui retourne le contenu de la page dans un TAB         curl_close($ch); // 5) On ferme la connexion à cURL   //echo $resultat;   //-------------Récupérer le cmcontinue -----------*/ // Parser le json avec une simple fonction $json = file_get_contents("example.json"); // Lire les données JSON dans un fichier distant HTTP : ici c un simple fichier $parsed_json = json_decode($json); // Récupère une chaîne encodée JSON et la convertit en une variable PHP echo $json; //var_dump($parsed_json);   $cmcontinue[] = $parsed_json->{'continue'}->{'cmcontinue'}; //echo "\n le cmcontinue est \n".$cmcontinue[$i]; $i++; } while (!end($cmcontinue));     fclose($fichier);   ?>

---

au début, "cmcontinue" est vide dans l'URL
et après avoir récupéré les résultats, la boucle continue tant qu'il y a une partie "cmcontinue" dans la réponse

donc la boucle est de ce genre :

Code:

---

1 2 3 4 5 6 7 8 9 10

$cmcontinue = "";   do {   // construction de l'URL $url = "https://fr.wiktionary.org/w/api.php?action=query&list=categorymembers&cmtitle=Category:Verbes_en_fran%C3%A7ais&utf8&cmprop=title&utf8&prop=extracts&cmlimit=500&format=json&cmcontinue=$cmcontinue";   ...   } while (isset($donnees["continue"]));

---

ensuite, il y a des fonctions qui lisent directement le résultat d'une requête GET et une autre pour transformer le format JSON donc au final ça peut se résumer comme ça :

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29

$cmcontinue = "";   $nb = 0;   do {   // construction de l'URL $url = "https://fr.wiktionary.org/w/api.php?action=query&list=categorymembers&cmtitle=Category:Verbes_en_fran%C3%A7ais&utf8&cmprop=title&utf8&prop=extracts&cmlimit=500&format=json&cmcontinue=$cmcontinue";   // récupération de la réponse $reponse = file_get_contents($url);   // analyse des données $donnees = json_decode($reponse, TRUE);     $nb++; echo "$nb - nombre de résultats : " . count($donnees["query"]["categorymembers"]); echo "<br/>";     // préparation de la suite   if (isset($donnees["continue"])) { $cmcontinue = $donnees["continue"]["cmcontinue"]; }     } while (isset($donnees["continue"]));

---

Merci beaucoup :D