IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Langages de programmation Discussion :

Choix d'un environnement pour l'interaction avec un site web


Sujet :

Langages de programmation

  1. #1
    Membre à l'essai
    Profil pro
    Inscrit en
    Décembre 2007
    Messages
    53
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Décembre 2007
    Messages : 53
    Points : 24
    Points
    24
    Par défaut Choix d'un environnement pour l'interaction avec un site web
    Bonjour,

    Je cherche un environnement (outils / langages) afin de creer un script pour
    - aller sur un site web
    - recuperer de facon regulieres des donnees de ce site (liste de valeurs regulierement mises a jour)
    - traiter ces donnees de facon statistiques (calcul de moyenne, tendance, regression, etc.)
    - interagir avec ce site avec des posts qui dependent de ces calculs.

    J ai trouve:
    - soit des applis trop simplistes (plugins Firefox comme iMacros) qui ne me permettent pas de faire ce que je veux;
    - soit des framework complexes (Selenium avec Ruby). La mise en place est tres fastidieuse. J y arrive difficilement.

    Auriez vous quelques conseils pour un environnement complet, ou je peux trouver des exemples simples?

    Merci

  2. #2
    Membre à l'essai
    Profil pro
    Inscrit en
    Décembre 2007
    Messages
    53
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Décembre 2007
    Messages : 53
    Points : 24
    Points
    24
    Par défaut
    J ai aussi trouve par exemple
    - PhantomJs (en Javascript)
    - Scrapy (en Python)
    - Weboob ?

    Tous offrent des choses plus ou moins differentes.

    Quelques conseils dans tout ca? C est une jungle pour moi.... Je ne sais pas trop comment faire le tri pour les avantages et les limites de chaque solution

  3. #3
    Membre chevronné

    Homme Profil pro
    Architecte logiciel
    Inscrit en
    Novembre 2006
    Messages
    1 252
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 48
    Localisation : France, Haute Garonne (Midi Pyrénées)

    Informations professionnelles :
    Activité : Architecte logiciel
    Secteur : Aéronautique - Marine - Espace - Armement

    Informations forums :
    Inscription : Novembre 2006
    Messages : 1 252
    Points : 1 954
    Points
    1 954
    Par défaut
    Hello !

    Du besoin que tu exprime, scrapy paraît convenir tout à fait.

    C'est un outil pur pythonien, qui offre un certain nombre de facilitateur pour l'exploration et l'extraction de données d'un site (ou d'un ensemble de sites). Le traitement des données peut ensuite se faire avec le concours de quelques libs python additionnelles.

    Une bonne introduction:
    https://medium.com/@kaismh/extractin...51a#.p8641wlck

  4. #4
    Membre à l'essai
    Profil pro
    Inscrit en
    Décembre 2007
    Messages
    53
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Décembre 2007
    Messages : 53
    Points : 24
    Points
    24
    Par défaut
    Merci pour le tres bon lien.
    Je vais essayer de me lancer avec Scrapy.

Discussions similaires

  1. Choix d'un environnement de dev GUI avec contraintes
    Par Dazdh dans le forum Interfaces Graphiques en Java
    Réponses: 6
    Dernier message: 17/03/2009, 17h16
  2. [PostNuke] Comment travailler avec PostNuke pour la création d'un site web ?
    Par cydrra dans le forum EDI, CMS, Outils, Scripts et API
    Réponses: 1
    Dernier message: 08/06/2007, 10h25
  3. Interaction avec des pages webs
    Par Ajira dans le forum C
    Réponses: 1
    Dernier message: 26/04/2007, 16h19
  4. Choix d'un livre pour apprendre DirectX avec C++
    Par ok07 dans le forum DirectX
    Réponses: 5
    Dernier message: 11/04/2007, 11h14
  5. interaction avec un site web
    Par Razorbak dans le forum Windows
    Réponses: 6
    Dernier message: 24/08/2006, 11h50

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo