Discussion :

[duboisa]

bonjour à tous

problème :
je prends un site un peu compliqué : le PMU
Des tas d'informations sont visibles sur ce site, comment les récupérer ?
Il y a aussi des pages différentes qui affichent des données complémentaires.
et des résultats, comment faire ?

idée : si pour une page donnée je pouvais déclencher une action (de récupération) qui m'envoie certaines données dans un csv, je serais
déjà content.

question :
ce n'est peut-être pas le bon forum, mais quand même avec RoR
on devrait pouvoir arriver à faire quelque chose .. ..
mais comment ?

[Mookie]

Salut,

Il faut écrire toi même un petit script qui ouvre la page souhaitée et récupère le contenu qui t'intéresse.

Tu peux pour cela utiliser hpricot : http://github.com/whymirror/hpricot/tree/master
Ou encore ScrAPI : http://railscasts.com/episodes/173-s...ng-with-scrapi

A+

[Zfred]

Tu peux l'écrire à la main, c'est pas la mort non plus.
Un script en Ruby (rien à voir avec Ror), qui se connecte à l'url, récupère la page, et puis pour chaque ligne tu fais une regex pour tester si elle contient le motif que tu cherches, et si oui, beh une autre regex pour récupérer exactement la portion que tu veux...

Si tu dois le faire souvent, et que ça soit fiable, alors tu peux appeler la cavalerie dont parle Mookie

[foohey]

salut,
hpricot est très bien pour parser du html, c'est un jeu d'enfant

[thibaut.barrere@gmai]

je prends un site un peu compliqué : le PMU
Des tas d'informations sont visibles sur ce site, comment les récupérer ?
Il y a aussi des pages différentes qui affichent des données complémentaires.
et des résultats, comment faire ?

Je te recommande chaudement d'utiliser Hpricot (ou un équivalent, comme Nokogiri) plutôt que d'utiliser des regexps, car je trouve ça plus facile à maintenir et à mettre au point (je me sers beaucoup de Hpricot sur mon aggrégateur de screencasts ruby/rails (Learnivore), ça m'a bien aidé).

Attention à un point: si ton projet prend de l'importance, tu risques d'être embêté par PMU (déjà vu sur un projet allociné par quelqu'un que je connais)

Thibaut
--
http://blog.logeek.fr
http://www.learnivore.com