Pagination GraphQL Python

Version imprimable

Bonjour,
Je souhaiterai récupérer les données d'une API, le problème c'est qu'elle ne renvoie que 49 données à chaque fois.
J'ai récupéré le startCursor, hasNextPage et endCursor mais je sais pas indiquer au script de boucler jusqu'a hasNextPage=False en s'appuyant sur le endCursor et ainsi avoir toutes les données de ma requête.
Voici le code :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
 
import requests
import json
 
query = """
    query {
      player(slug:"lionel-andres-messi-cuccittini"){
            cards(rarities:[limited]) {
                nodes {
                    slug
                    userOwnerWithRate {
                        from
        }
        }
      pageInfo{
        startCursor
        hasNextPage
        endCursor
    }
    }
    }
  }
"""
url = 'https://api.sorare.com/graphql/'
r = requests.post(url, json={'query': query})
json_data = json.loads(r.text)
print(json_data)

Avez une idée pour récupérer toutes les pages d'une requête s'il vous plait?
Merci

01/07/2022, 08h48
popo
Il faut utiliser les options de pagination pour obtenir la suite :
au choix :
- first et offset
- first et after
Un peu de documentation :
https://graphql.org/learn/pagination/
01/07/2022, 12h30
berty4242

Effectivement j'ai bien vue dans la documentation qu'il fallait utiliser le first. Le problème est que je ne sais pas comment l'indiquer dans Python.
01/07/2022, 13h26
popo
first et offet/after n'ont rien à voir avec python.
Ce sont des paramètres dans la requête Graph QL.

Et tu as indiqué que tu arrives à récupérer la valeur de hasNextPage.
Donc une fois que tu as indiqué ces paramètres dans ta requête, il suffit de boucler jusqu'à ce que hasNextPage passe à False.

Dans cette boucle, avant de relancer la requête, suivant l'option que tu as choisis (offset ou after):
- Soit tu augmente la valeur de offet de 50 (ou 49 si tu as réellement 49 élément qui remontent)
- Soit tu récupère la valeur du dernier Id
01/07/2022, 15h28
berty4242

1 pièce(s) jointe(s)
Citation:
Envoyé par popo

first et offet/after n'ont rien à voir avec python.
Ce sont des paramètres dans la requête Graph QL.

Et tu as indiqué que tu arrives à récupérer la valeur de hasNextPage.
Donc une fois que tu as indiqué ces paramètres dans ta requête, il suffit de boucler jusqu'à ce que hasNextPage passe à False.

Dans cette boucle, avant de relancer la requête, suivant l'option que tu as choisis (offset ou after):

Soit tu augmente la valeur de offet de 50 (ou 49 si tu as réellement 49 élément qui remontent)
Soit tu récupère la valeur du dernier Id
Il ne me semble pas qu'on puisse faire de boucle dans graphQl.
Manuellement ca fonctionne mais il y a trop de pages, il faudrait que ca boucle :
Pièce jointe 621681

J'aurai pensé pouvoir récupérer le endCursor puis l'incrémenté jusqu'à hasNextPage : False depuis python mais je n'ai pas les connaissances suffisantes.
01/07/2022, 17h54
popo

Citation:

Envoyé par berty4242

Il ne me semble pas qu'on puisse faire de boucle dans graphQl.

Et tu ne t'es pas dit que cette boucle devrait être fait avec python....

Citation:

Envoyé par berty4242

J'aurai pensé pouvoir récupérer le endCursor puis l'incrémenté jusqu'à hasNextPage : False depuis python mais je n'ai pas les connaissances suffisantes.

endCursor*représente l'id du dernier élément renvoyé Cest tout bonnement ce que je t'ai suggéré.

Et si tes connaissances en python ne te permettent pas de boucler et de formater une chaîne avec des paramètres, je ne pourrais que te conseiller d'apprendre les bases avant d'essayer d'appeler des API.
01/07/2022, 18h20
berty4242

Citation:

Envoyé par popo

Et tu ne t'es pas dit que cette boucle devrait être fait avec python....

Bien sur que oui puisque j'ouvre un sujet dans Python...

Citation:

mais je sais pas indiquer au script de boucler

Citation:

Envoyé par popo

Et si tes connaissances en python ne te permettent pas de boucler et de formater une chaîne avec des paramètres, je ne pourrais que te conseiller d'apprendre les bases avant d'essayer d'appeler des API.

Je sais qu'il faut apprendre les bases, mais c'est toujours plus stimulant d'avoir une idée précise et essayer de l'appliquer.
01/07/2022, 19h03
popo

Si tu trouves plus stimulant de mettre la charrue avant les bœufs plutôt que faire les choses correctement, alors tu t'es trompé de forum.

Pour ma part, j'estime t'avoir donné assez d'informations pour résoudre ton problème.
01/07/2022, 19h11
berty4242

Citation:

Envoyé par popo

Si tu trouves plus stimulant de mettre la charrue avant les bœufs plutôt que faire les choses correctement, alors tu t'es trompé de forum.

Pour ma part, j'estime t'avoir donné assez d'informations pour résoudre ton problème.

Merci d'avoir pris le temps de me répondre.