Discussion :

[pop_up]

Salut,

Je cherche à récupérer une page en spécifiant un proxy et un User-Agent.

j'ai donc essayé pour le User-Agent:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
import urllib2
def recup_url(url):
       request = urllib2.Request(url)
       request.add_header('User-Agent','Mozilla/4.0')
       opener = urllib2.build_opener()
       urlData = opener.open(request).read()
       return urlData

ça fonctionne !!!

maintenant, pour definir le proxy, j'ai testé:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
import urllib2
def recup_url(url):
       request = urllib2.Request(url)
       request.set_proxy('http://proxytest:3128','http')
       opener = urllib2.build_opener()
       urlData = opener.open(request).read()
       return urlData

et ça fonctionne pas

ça renvoie l'erreur "urllib2.URLError: <urlopen error (-2, 'Name or service not known')>

si quelqu'un a une idée

[jpcw2002]

regarder passer par un proxy sur cette page:
http://wikipython.flibuste.net/moin.py/CodesReseau
@++

[pop_up]

Merci beaucoup jpcw2002

réponse plus que satisfaisante.

pour ceux que ça interesse voila un petit resumé pour voir comment faire

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
import urllib2
request = urllib2.Request("http://www.devellopez.net")
request.add_header('User-Agent','Mozilla/4.0')
proxy_info={'host':'proxytest.cur-archamps.fr','port':3128}
proxy_support = urllib2.ProxyHandler({"http" : "http://%(host)s:%(port)d" % proxy_info})
opener = urllib2.build_opener(proxy_support)
urllib2.install_opener(opener)
pagehtml = urllib2.urlopen(request).read()
return pagehtml