Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter
Python et légalité ?
Bonjour
Je voudrais analyser les résultats du quinté afin d'améliorer mes chances. Chatgpt me conseille de faire un programme avec python qui ira mettre dans un fichier Excel tous les résultats des courses passées sur l'année écoulé, en se servant sur un site PMU.
Mais étant débutant j'ai peur de faire quelque chose dinterdit... à votre avis, est ce légal de se servir de python pour collecter des données sur un site ??
Merci pour vos conseils
Sébastien
Bonjour,
Engager sa responsabilité civile ou pénale sur ce que suggère ChatGPT n'est PAS DU TOUT une bonne idée. ChatGPT n'est pas une intelligence mais une pseudo-intelligence. Elle n'est pas non plus dotée de conscience et encore moins d'expérience de la vie. Même si elle utilise des réseaux neuronaux qui font que son cheminement commence à être vraiment proche du cerveau humain, ce qu'elle produit n'est jamais une opinion réfléchie. Ce serait plutôt comme appuyer ses décisions sur le rêve que l'on a fait la veille.Envoyé par =Sebastien49bordx
Le fait d'utiliser Python en soi ou toute autre technologie est complètement indépendant du problème. Les deux considérations sont totalement orthogonales dans cette situation.à votre avis, est ce légal de se servir de python…
C'est tout-à-fait légal si la ou les pages ciblées sont publiques et librement consultables par ailleurs, sauf si le site indique explicitement le contraire dans ses conditions d'utilisation. Dans ce second cas, si tu y contreviens, le pire que tu risques est surtout de te faire bannir.… pour collecter des données sur un site ??
Ceci étant dit, il faut effectivement être prudent et respecter des règles de bonne conduite vis-à-vis du serveur que tu interroges. Par exemple, laisser s'écouler quelques secondes entre le téléchargement d'une page et celui de la suivante, ainsi qu'observer un temps de repos entre deux vagues si la quantité d'information est vraiment importante. Même s'il faut 30 minutes à ton script pour récupérer la totalité des données, tu le laisses tourner en tâche de fond et cela ne donnera pas l'impression à l'administrateur d'être victime d'une cyber-attaque.
bonjour
Question qui n'a aucun rapport avec pythonon peut utiliser bien d'autres langages ou outils dédiés...
Pour la légalité, tu peux faire une recherche "web scraping légalité", exemple de résultat
Si ces données sont pour un usage interne OK, mais c'est si c'est pour diffuser publiquement (ou pire à la vente) le résultat du scraping en "base de donnée", c'est une autre histoire.si tu y contreviens, le pire que tu risques est surtout de te faire bannir
$moi= (:nono: !== :oops:) ? :king: : :triste: ;
Python et légalité
Merci pour vos réponse.
Ça me rassure un peu. Oui les données des courses passées que je veux collecter avec python sont publiques sur le site PMU.
Mais il faut cliquer sur chaque journée pour voir les courses. Donc sur 1 an j'ai besoin d'automatiser.
Et le fait que ce soit un programme qui s'en charge, j'avais peur que le site considère ça comme une attaque....
Sinon y a d'autres solutions ? Pour être sûr que le site ne se sente pas agresser ?
Merci de vos conseils
Sébastien
Vous pouvez accéder aux archives du PMU modulo finance dont des packs découvertes à 1€.
Si vous ne savez pas programmer, vous n'allez pas vous balader sur Internet (comme vous n'irez pas avec un véhicule sur la chaussée publique sans permis).
- W
Oui mais chatgpt me dit qu'il peut me guider pas à pas pour faire un programme avec python pour collecter les données, du coup peut être que ca sera possible sans connaissance si il me guide ?
Pack modulo je vais me renseigner, merci
Dans un premier temps pour faire des ébauches de programmes peut-être, pour obtenir quelque chose qui permette de voir à quoi cela ressemble globalement quand on est totalement profane mais même dans ce cas, le mieux est d'aller directement consulter un tutoriel écrit à cette fin par une personne en chair et en os.
Ce que l'IA sait faire est proprement bluffant en soi, même pour un programmeur conventionnel, dans le sens où il serait très difficile il y a encore peu de temps de mettre au point un programme qui soit capable de faire la même chose. Malheureusement, ça ne veut pas forcément dire que c'est utile, ni surtout exact ! Par exemple, je lui ai demandé récemment d'écrire un émulateur de TO8D (un ordinateur 8 bits des années 1980) fonctionnant sous Linux. Il m'a effectivement écrit l'ébauche d'un interpréteur de code en langage machine (ce qui reste très impressionnant) mais pour le microprocesseur Z80 et pas 6809 ! « Close but no cigar », comme on dit.
Le Python est en outre un langage relativement facile à apprendre et qui permet de faire rapidement des choses assez poussées car il est livré avec beaucoup de packages spécialisés dans toutes sortes de tâches courantes, dont l'exploitation du réseau et le traitement de pages web. Tu prendras beaucoup plus de plaisir à apprendre le Python en soi, fût-ce en se donnant ton projet comme objectif, qu'essayer d'expliquer à ChatGPT comment faire un travail pour toi.
Ok je vais ce que tu veux dire...
Et pour le côté légalité de la démarche, c'est autorisé de faire un programme Python pour collecter des données publiques ? Ou y a le risque que le site se sente attaqué ?
déja dit ! on se fiche que ton programme soit en python !!!c'est autorisé de faire un programme Python
En premier on regarde https://www.pmu.fr/robots.txt
Ensuite chaque site a ces propres réglages (pour ne pas être attaqué), on ne va pas faire une étude de ton site à ta place. La temporisation est normalement la première chose, parfois il faut une temporisation aléatoire, parfois ...
-----------
Ensuite chaque site web est très très différent et si tes pages utilisent javascript pour la navigation ou datas, il va falloir utiliser un outil externe (pas écrit en python).
Commence a demander a ton robby d'analyser tes pages web ! mais aussi si il peut naviguer entre les pages web désirées. si il n'est pas capable alors abandonne sans te poser de question (ou alors apprend par toi même).
Note : si tu ne connais pas python, alors pourquoi l'utiliser ? IA est bête, toi tu es plus intelligent ! rien ne t'oblige. Perso je fais du web scraping plus souvent en go que python
https://go-colly.org/
https://www.zenrows.com/blog/seleniu...nium-in-golang
...
Tu peux aussi en javascript ...
$moi= (:nono: !== :oops:) ? :king: : :triste: ;
C'est chatgpt qui m'a parlé de Python, mais si tu penses que go ou javascript convient mieux pour collecter des données ok... faudra que je me renseigne comment ça marche lol je connais pas du tout.
donc le langage ne change rien, il faut juste que robby soit capable de tout faire sans aucune aide. A priori, tu n'a aucune chanceje connais pas du tout
----------
ps: aucun intéret de recopier tout le contenu de nos messages pour répondre
$moi= (:nono: !== :oops:) ? :king: : :triste: ;
Ce que tu veux faire, c'est du Web-Scraping. Il y a plein d'outils de Web-Scraping disponibles sur le marché, dont certainement plein de solutions gratuites (avec certainement des limitations sur le nombre de pages à scrapper, mais je pense que tu es tranquille)
cf wikipedia Web_scraping
N'oubliez pas le bouton Résolu si vous avez obtenu une réponse à votre question.
Collecte des données
Donc pour mon souhait de collecter sur un seul fichier tous les résultats du quinté de l'année écoulé,sur un site hippique, la méthode qui convient le mieux est le web scraping.... ok... car chatgpt me parle de python, d api publique, de vba , du coup il conseille 10 façons d'un coup ! Et vu que j'y connais rien je suis perdu !
Et pour un novice comme moi, faut que je me serve d'un logiciel de web scraping? Lequel ? C'est peut-être réservé aux informaticiens confirmés ?
Ou chatgpt peut peut-être me dicter pas à pas pour faire mon programme de web scraping et en une heure c'est plié non ?
Que feriez vous a ma place svp ?
Merci de vos conseils
Sébastien
Bonjour,
Oui c'est faisable en Python avec les modules BeautifulSoup et/ou Selenium mais cela demande des notions de programmation avancée.
De plus il te faut également maitriser le Html (balises, classes et id) et comprendre la structure de la page ou des pages à scraper pour en extraire les élements souhaités.
Alors demander à chatGPT, sans aucune de ces notions, c'est chose impossible !!!!
Et pour finir comme dit plusieurs fois, il est important de se questionner sur la légalité et l'autorisation de telles pratiques, sans parler du bannissement du site...
Non, tu n'as pas compris.la méthode qui convient le mieux est le web scraping
Tu veux 'aspirer' des données à partir d'un site (pmu.fr). Aspirer des données à partir d'un site Web, ça porte un nom, ça s'appelle 'faire du Web-scrapping'.
Que tu le fasses en Python, en Java, avec un outil que tu vas acheter ou avec un outil gratuit, peu importe, ce que tu veux, c'est : tu veux Web-Scrapper le site Pmu.fr.
Ou, si tu préfères, utilisons le mot français préconisé : tu veux moissonner le site pmu.fr.
Pour moissonner un site, tu peux prendre une moissonneuse qui a été fabriquée par un fabricant de moissonneuses (il y a plein de modèle de moissonneuses qui existent, il suffit d'en choisir une et de l'installer), ou bien tu peux construire une moissonneuse toi-même.
Construire une moissonneuse soi-même, ça demande des compétences. Des compétences en programmation. As-tu ces compétences ? Penses-tu que ChatGPT va faire de toi un programmeur professionnel ?
Et si tu choisis cette option, tu vas construire ton propre outil de Web-scrapping, et à la fin, de toutes façons, tu feras du Web-scrapping.
Acheter une moissonneuse, ou télécharger une moissonneuse existante et fabriquée par un industriel fabricant de moissonneuses, ça paraît plus simple.
Quand tu auras choisi une moissonneuse, et que tu l'auras installée, il faudra la piloter, en d'autres mots, il faudra la paramétrer.
A priori, c'est plus simple de piloter une voiture que de construire une voiture.
En d'autres mots, soit tu réinventes la roue (pourquoi pas, c'est un exercice amusant), soit tu utilises une roue faite par un spécialiste.
Sur la page Wikipedia, il y a ce paragraphe où on parle des moissonneuses prêtes à être utilisées.
N'oubliez pas le bouton Résolu si vous avez obtenu une réponse à votre question.
Je me souviens que, lorsque j'étais à la recherche d'icones à inclure dans mes programmes (il y a bien longtemps), j'avais utilisé avec succès HTTrack. Et je n'y vois rien d'illégal, à partir du moment où
- le site est public,
- et que les conditions d'utilisation n'interdisent pas d'utiliser "un programme" pour pomper les données.
Par la suite, j'ai découvert curl, que je pouvais utiliser dans mes programmes C. Ce que j'ai fait (par exemple) pour aller chercher des infos sur les programmes télé, en sélectionnant les programmes que je souhaitais regarder (ce n'est maintenant quasi plus possible, les programmes télés ne sont plus dans les html).
On écrit "J'ai tort" ; "tord" est la conjugaison du verbre "tordre" à la 3ème personne de l'indicatif présent ;)
Web scraping
Merci à tous pour vos conseils.
Du coup vu que je n'y connais rien je ne sais trop choisir le bon programme.... et la bonne moissonneuse du coup !
Pour quelqu'un comme moi qui n'a aucune notion d'informatique et de programmation, concrètement de quel outil précis je devrais me servir pour avoir ma liste des quinté+ des 6 derniers mois ? Donc un truc gratuit et qui demanderait aucune connaissance ? Ça existe d'après vous ? :-)
Merci
Sébastien
Pour faire court, ça dépend beaucoup du site à aspirer mais dans ton cas de figure, pour récupérer quelques pages bien spécifiques sur un site précis, alors quelques lignes de Python restent le plus approprié.
Deux toutes petites questions :
— Tu travailles avec quel système d'exploitation au quotidien ? (j'imagine que c'est Windows) ;
— Le site ciblé a-t-il besoin que tu sois logué (connecté) pour accéder aux pages en question ? Parce que dans ce cas, c'est toujours faisable mais ça complique un tout petit peu la chose (aussi bien sur le plan technique que légal).
Imaginons qu'un tel outil existe et que vous ayez récupéré cette liste... vous allez en faire quoi?
- W
En complément
Bonjour,
En tant que programmeur pour accéder et récupérer des données d'un serveur web, habituellement tu dois avoir une documentation sur l'interface de programmation (API) :
https://fr.wikipedia.org/wiki/Interf..._programmation
ex. une méthode Get pour récupérer des données produit avec une description de ses paramètres.
En Python : x = requests.get(url, headers, ..).
ça peut comprendre aussi un système d'authentification.
Cdlt
Vous trouverez dans la FAQ, les sources ou les tutoriels, de l'information accessible au plus grand nombre, plein de bonnes choses à consulter sans modération
Des tutoriels pour apprendre à créer des formulaires de planning dans vos applications Access :
Gestion sur un planning des présences et des absences des employés
Gestion des rendez-vous sur un calendrier mensuel
Importer un fichier JSON dans une base de données Access :
Import Fichier JSON
Répondre avec citation
Partager