Discussion :

[Malflala]

Bonjour

Travaillant en python depuis peu de temps j'essaie de récupérer des informations depuis des sites webs, les bibliothèques urllib et urllib2 gérant beaucoup de cas je n'ai pas eu de problème, jusqu’à ce que je rencontre de l'ajax.

Exemple:http://www.benq.com/product/projector/GP3/

Je pense qu'il suffirait d’accéder à cette URL tout en passant un paramètre get: #panel-spec

Le problème est que je n'ai vu nul part de moyen d'y arriver.


Merci de votre aide

[Alliaël]

Bonjour,
Je ne sais pas comment faire ce que tu veux (ça commence bien ).
Par contre dans la page que tu montres, les données des spécifications sont dans le html de la page quelque soit le panneau actif.
Les panneaux non actifs sont simplement en

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

display:none

ce qui ne devrait pas poser de problème en python (si tu récupères le html pour le parser).

[Malflala]

Bonjour,
Eh bien oui en effet tu as raison je peux accéder aux spécifications, et dire que je n'avais même pas regarder

Merci beaucoup pour ton aide, cela résout beaucoup de problèmes car sur la plupart des sites visés le display est à none

mais vu que les problèmes ne viennent jamais seul, je dois avouer en avoir un qui n'est pas en python, je ne sais pas si il vaut mieux que j'ouvre un nouveau sujet :/

http://www.christiedigital.com/en-us...s/default.aspx

voici le site qui me pose problème, en effet on voit bien la liste des projecteurs que je veux récupérer, mais quand j'aspire le site ou que l'on va voire le code source, rien.

Si quelqu'un pouvait m'éclairer sur la cause de ceci, et peut être une solution qui sait?

Merci

[wiztricks]

Salut,

http://www.christiedigital.com/en-us...s/default.aspx

C'est une page dynamique (.aspx) construite avec microsoft sharepoint.
Pour en récupérer le contenu, il faut exécuter le javascript qui est dans le document "...Pages/default.aspx".
Et pour exécuter ce javascript, il faut un navigateur Web (ou un Webkit).

Vous avez des bouts de solution avec Selenium et/ou scrapy et/ou intégrer Webkit via Qt ou GTK.

- W

[Alliaël]

C'est cool si ça résout au moins ton soucis.
Par contre sur la page que tu donnes, je ne vois pas vraiment de liste.
Pourrais tu prendre un screen et entourer la liste que tu veux ? Ça devrait être plus clair pour comprendre.

[Malflala]

@wiztricks
Tout d'abord merci pour l'info sur les .aspx, je me coucherai moins bête ce soir

j'avais déjà un peu regardé selenium, mais ce "logiciel" peut il être intégré à un scipt python? Merci de tes solutions, je vais également regarder scrapy de ce que j'ai rapidement pu voire il a une aide un peu plus développé.

Merci de ton aide

@Alliaël



Voici la liste, encore merci de te pencher sur le problème

[fred1599]

j'avais déjà un peu regardé selenium, mais ce "logiciel" peut il être intégré à un scipt python?

C'est si difficile de taper dans google selenium python ?

[Kurodiam]

Pas évident de savoir utiliser bien le lien

[Malflala]

Merci à tous, j'ai tout ce qu'il me faut et mon projet de stage va pouvoir continué tranquillement son petit bout de chemin