Version imprimable
Bonjour
Je voudrais analyser les résultats du quinté afin d'améliorer mes chances. Chatgpt me conseille de faire un programme avec python qui ira mettre dans un fichier Excel tous les résultats des courses passées sur l'année écoulé, en se servant sur un site PMU.
Mais étant débutant j'ai peur de faire quelque chose dinterdit... à votre avis, est ce légal de se servir de python pour collecter des données sur un site ??
Merci pour vos conseils
Sébastien
Bonjour,
Engager sa responsabilité civile ou pénale sur ce que suggère ChatGPT n'est PAS DU TOUT une bonne idée. ChatGPT n'est pas une intelligence mais une pseudo-intelligence. Elle n'est pas non plus dotée de conscience et encore moins d'expérience de la vie. Même si elle utilise des réseaux neuronaux qui font que son cheminement commence à être vraiment proche du cerveau humain, ce qu'elle produit n'est jamais une opinion réfléchie. Ce serait plutôt comme appuyer ses décisions sur le rêve que l'on a fait la veille.Citation:
Envoyé par =Sebastien49bordx
Le fait d'utiliser Python en soi ou toute autre technologie est complètement indépendant du problème. Les deux considérations sont totalement orthogonales dans cette situation.Citation:
à votre avis, est ce légal de se servir de python…
C'est tout-à-fait légal si la ou les pages ciblées sont publiques et librement consultables par ailleurs, sauf si le site indique explicitement le contraire dans ses conditions d'utilisation. Dans ce second cas, si tu y contreviens, le pire que tu risques est surtout de te faire bannir.Citation:
… pour collecter des données sur un site ??
Ceci étant dit, il faut effectivement être prudent et respecter des règles de bonne conduite vis-à-vis du serveur que tu interroges. Par exemple, laisser s'écouler quelques secondes entre le téléchargement d'une page et celui de la suivante, ainsi qu'observer un temps de repos entre deux vagues si la quantité d'information est vraiment importante. Même s'il faut 30 minutes à ton script pour récupérer la totalité des données, tu le laisses tourner en tâche de fond et cela ne donnera pas l'impression à l'administrateur d'être victime d'une cyber-attaque.
bonjour
Question qui n'a aucun rapport avec python ;) on peut utiliser bien d'autres langages ou outils dédiés...
Pour la légalité, tu peux faire une recherche "web scraping légalité", exemple de résultat
Si ces données sont pour un usage interne OK, mais c'est si c'est pour diffuser publiquement (ou pire à la vente) le résultat du scraping en "base de donnée", c'est une autre histoire.Citation:
si tu y contreviens, le pire que tu risques est surtout de te faire bannir
Merci pour vos réponse.
Ça me rassure un peu. Oui les données des courses passées que je veux collecter avec python sont publiques sur le site PMU.
Mais il faut cliquer sur chaque journée pour voir les courses. Donc sur 1 an j'ai besoin d'automatiser.
Et le fait que ce soit un programme qui s'en charge, j'avais peur que le site considère ça comme une attaque....
Sinon y a d'autres solutions ? Pour être sûr que le site ne se sente pas agresser ?
Merci de vos conseils
Sébastien
Vous pouvez accéder aux archives du PMU modulo finance dont des packs découvertes à 1€.Citation:
Envoyé par Sebastien49bordx
Si vous ne savez pas programmer, vous n'allez pas vous balader sur Internet (comme vous n'irez pas avec un véhicule sur la chaussée publique sans permis).
- W
Citation:
Envoyé par wiztricks
Oui mais chatgpt me dit qu'il peut me guider pas à pas pour faire un programme avec python pour collecter les données, du coup peut être que ca sera possible sans connaissance si il me guide ?
Pack modulo je vais me renseigner, merci
Dans un premier temps pour faire des ébauches de programmes peut-être, pour obtenir quelque chose qui permette de voir à quoi cela ressemble globalement quand on est totalement profane mais même dans ce cas, le mieux est d'aller directement consulter un tutoriel écrit à cette fin par une personne en chair et en os.Citation:
Envoyé par Sebastien49bordx
Ce que l'IA sait faire est proprement bluffant en soi, même pour un programmeur conventionnel, dans le sens où il serait très difficile il y a encore peu de temps de mettre au point un programme qui soit capable de faire la même chose. Malheureusement, ça ne veut pas forcément dire que c'est utile, ni surtout exact ! Par exemple, je lui ai demandé récemment d'écrire un émulateur de TO8D (un ordinateur 8 bits des années 1980) fonctionnant sous Linux. Il m'a effectivement écrit l'ébauche d'un interpréteur de code en langage machine (ce qui reste très impressionnant) mais pour le microprocesseur Z80 et pas 6809 ! « Close but no cigar », comme on dit.
Le Python est en outre un langage relativement facile à apprendre et qui permet de faire rapidement des choses assez poussées car il est livré avec beaucoup de packages spécialisés dans toutes sortes de tâches courantes, dont l'exploitation du réseau et le traitement de pages web. Tu prendras beaucoup plus de plaisir à apprendre le Python en soi, fût-ce en se donnant ton projet comme objectif, qu'essayer d'expliquer à ChatGPT comment faire un travail pour toi.
Ok je vais ce que tu veux dire...Citation:
Envoyé par Obsidian
Et pour le côté légalité de la démarche, c'est autorisé de faire un programme Python pour collecter des données publiques ? Ou y a le risque que le site se sente attaqué ?
déja dit ! on se fiche que ton programme soit en python !!!Citation:
c'est autorisé de faire un programme Python
En premier on regarde https://www.pmu.fr/robots.txt
Ensuite chaque site a ces propres réglages (pour ne pas être attaqué), on ne va pas faire une étude de ton site à ta place. La temporisation est normalement la première chose, parfois il faut une temporisation aléatoire, parfois ...
-----------
Ensuite chaque site web est très très différent et si tes pages utilisent javascript pour la navigation ou datas, il va falloir utiliser un outil externe (pas écrit en python).
Commence a demander a ton robby d'analyser tes pages web ! mais aussi si il peut naviguer entre les pages web désirées. si il n'est pas capable alors abandonne sans te poser de question (ou alors apprend par toi même).
Note : si tu ne connais pas python, alors pourquoi l'utiliser ? IA est bête, toi tu es plus intelligent ! rien ne t'oblige. Perso je fais du web scraping plus souvent en go que python
https://go-colly.org/
https://www.zenrows.com/blog/seleniu...nium-in-golang
...
Tu peux aussi en javascript ...
Citation:
Envoyé par papajoker
C'est chatgpt qui m'a parlé de Python, mais si tu penses que go ou javascript convient mieux pour collecter des données ok... faudra que je me renseigne comment ça marche lol je connais pas du tout.
donc le langage ne change rien, il faut juste que robby soit capable de tout faire sans aucune aide. A priori, tu n'a aucune chance :oops:Citation:
je connais pas du tout
----------
ps: aucun intéret de recopier tout le contenu de nos messages pour répondre ;)
Ce que tu veux faire, c'est du Web-Scraping. Il y a plein d'outils de Web-Scraping disponibles sur le marché, dont certainement plein de solutions gratuites (avec certainement des limitations sur le nombre de pages à scrapper, mais je pense que tu es tranquille)
cf wikipedia Web_scraping
Donc pour mon souhait de collecter sur un seul fichier tous les résultats du quinté de l'année écoulé,sur un site hippique, la méthode qui convient le mieux est le web scraping.... ok... car chatgpt me parle de python, d api publique, de vba , du coup il conseille 10 façons d'un coup ! Et vu que j'y connais rien je suis perdu !
Et pour un novice comme moi, faut que je me serve d'un logiciel de web scraping? Lequel ? C'est peut-être réservé aux informaticiens confirmés ?
Ou chatgpt peut peut-être me dicter pas à pas pour faire mon programme de web scraping et en une heure c'est plié non ?
Que feriez vous a ma place svp ?
Merci de vos conseils
Sébastien
Bonjour,
Oui c'est faisable en Python avec les modules BeautifulSoup et/ou Selenium mais cela demande des notions de programmation avancée.Citation:
Envoyé par Sebastien49bordx
De plus il te faut également maitriser le Html (balises, classes et id) et comprendre la structure de la page ou des pages à scraper pour en extraire les élements souhaités.
Alors demander à chatGPT, sans aucune de ces notions, c'est chose impossible !!!!
Et pour finir comme dit plusieurs fois, il est important de se questionner sur la légalité et l'autorisation de telles pratiques, sans parler du bannissement du site...
Non, tu n'as pas compris.Citation:
la méthode qui convient le mieux est le web scraping
Tu veux 'aspirer' des données à partir d'un site (pmu.fr). Aspirer des données à partir d'un site Web, ça porte un nom, ça s'appelle 'faire du Web-scrapping'.
Que tu le fasses en Python, en Java, avec un outil que tu vas acheter ou avec un outil gratuit, peu importe, ce que tu veux, c'est : tu veux Web-Scrapper le site Pmu.fr.
Ou, si tu préfères, utilisons le mot français préconisé : tu veux moissonner le site pmu.fr.
Pour moissonner un site, tu peux prendre une moissonneuse qui a été fabriquée par un fabricant de moissonneuses (il y a plein de modèle de moissonneuses qui existent, il suffit d'en choisir une et de l'installer), ou bien tu peux construire une moissonneuse toi-même.
Construire une moissonneuse soi-même, ça demande des compétences. Des compétences en programmation. As-tu ces compétences ? Penses-tu que ChatGPT va faire de toi un programmeur professionnel ?
Et si tu choisis cette option, tu vas construire ton propre outil de Web-scrapping, et à la fin, de toutes façons, tu feras du Web-scrapping.
Acheter une moissonneuse, ou télécharger une moissonneuse existante et fabriquée par un industriel fabricant de moissonneuses, ça paraît plus simple.
Quand tu auras choisi une moissonneuse, et que tu l'auras installée, il faudra la piloter, en d'autres mots, il faudra la paramétrer.
A priori, c'est plus simple de piloter une voiture que de construire une voiture.
En d'autres mots, soit tu réinventes la roue (pourquoi pas, c'est un exercice amusant), soit tu utilises une roue faite par un spécialiste.
Sur la page Wikipedia, il y a ce paragraphe où on parle des moissonneuses prêtes à être utilisées.
Je me souviens que, lorsque j'étais à la recherche d'icones à inclure dans mes programmes (il y a bien longtemps), j'avais utilisé avec succès HTTrack. Et je n'y vois rien d'illégal, à partir du moment où
- le site est public,
- et que les conditions d'utilisation n'interdisent pas d'utiliser "un programme" pour pomper les données.
Par la suite, j'ai découvert curl, que je pouvais utiliser dans mes programmes C. Ce que j'ai fait (par exemple) pour aller chercher des infos sur les programmes télé, en sélectionnant les programmes que je souhaitais regarder (ce n'est maintenant quasi plus possible, les programmes télés ne sont plus dans les html).
Merci à tous pour vos conseils.
Du coup vu que je n'y connais rien je ne sais trop choisir le bon programme.... et la bonne moissonneuse du coup !
Pour quelqu'un comme moi qui n'a aucune notion d'informatique et de programmation, concrètement de quel outil précis je devrais me servir pour avoir ma liste des quinté+ des 6 derniers mois ? Donc un truc gratuit et qui demanderait aucune connaissance ? Ça existe d'après vous ? :-)
Merci
Sébastien
Pour faire court, ça dépend beaucoup du site à aspirer mais dans ton cas de figure, pour récupérer quelques pages bien spécifiques sur un site précis, alors quelques lignes de Python restent le plus approprié.Citation:
Envoyé par Sebastien49bordx
Deux toutes petites questions :
— Tu travailles avec quel système d'exploitation au quotidien ? (j'imagine que c'est Windows) ;
— Le site ciblé a-t-il besoin que tu sois logué (connecté) pour accéder aux pages en question ? Parce que dans ce cas, c'est toujours faisable mais ça complique un tout petit peu la chose (aussi bien sur le plan technique que légal).
Imaginons qu'un tel outil existe et que vous ayez récupéré cette liste... vous allez en faire quoi?Citation:
Envoyé par Sebastien49bordx
- W
Bonjour,
En tant que programmeur pour accéder et récupérer des données d'un serveur web, habituellement tu dois avoir une documentation sur l'interface de programmation (API) :
https://fr.wikipedia.org/wiki/Interf..._programmation
ex. une méthode Get pour récupérer des données produit avec une description de ses paramètres.
En Python : x = requests.get(url, headers, ..).
ça peut comprendre aussi un système d'authentification.
Cdlt
[QUOTE=Obsidian;12073584]
Salut obsidian, pour répondre j'utilise Windows et je vois que les résultats des courses hippiques sont donnés sans besoin de se loger.
Donc faut que je demande à chatgpt ou Microsoft Copilot de me guider à faire un programme avec python c'est ça? Tu crois que c'est possible ?
Ce site c'est vraiment pas intuitif, je sais jamais où cliquer pour répondre et on sait pas trop à qui on répond!
Merci pour ton aide
Sébastien
Bonjour
Je veux l'analyser pour améliorer ma chance au quinté ! L'espoir fait vivre! Lol
Bonjour.
Non!. Si tu ne comprends pas ce que tu fais, chatgpt ne te sera d'aucune aide.Citation:
Envoyé par Sebastien49bordx
Le plus simple (je comprends que tu ne veux pas passer de longues heures à apprendre à coder) est d'embaucher une personne compétente . ;)
Bonjour
"Analyser" ? Et de quelle manière ? Aux probas les résultats passés n''ont aucune influence sur le résultat suivant. Une pièce peut tomber 2000 fois sur pile, la fois suivante elle aura toujours 1 chance sur 2 de tomber sur face.Citation:
Envoyé par Sebastien49bordx
Et pour les chevaux c'est encore pire. Un cheval il a ses humeurs, ses terrains (lourd/gras/mouillé/sec) et ses phobies. Et à chaque fois qu'un cheval gagne, on lui rajoute 1kg pour la course suivante. Les chevaux aux courses c'est la théorie du chaos (un seul changement minime entraine des résultats anarchiques). Je ne vois vraiment pas comment les résultats des quintés passés t'aideront à améliorer tes chances.
Si tu veux gagner, il te faut prendre un journal spécialisé et noter les chevaux qu'il propose (en général il propose toujours des chevaux à jouer comme par exemple https://www.canalturf.com/courses_chevaux_jour.php) puis noter les résultats. De là tu pourras arriver à en tirer une proba style "sur 100 chevaux proposés il y en a 40 qui ont gagné donc si je joue 3 fois d'affilée leurs choix en doublant la mise à chaque fois j'ai de bonnes chances de gagner une fois et de ramasser le tout".
Certes mais la question est de savoir comment vous allez analyser çà... normalement, ce devrait être un boulot que vous savez déjà faire "à la main" dont on pourrait automatiser certaines étapes.Citation:
Envoyé par Sebastien49bordx
L'idée étant que ça va être plus touffu et brouillon que de récupérer des informations... et pour pouvoir adapter un code à vos idées, il va falloir comprendre ce qu'il fait (et vous ne pouvez pas faire l'impasse sur la case apprentissage)
- W