Discussion :

[fatbob]

Bonjour,
Je cherche à télécharger automatiquement des fichiers zips à partir d'un site
Naïvement, pour commencer, j'ai fait ça :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
 
    def download_file(self, file_url):
        filename = file_url.split("/")[-1]
        local_filename=os.path.join(prm.zipTempDir, filename)
        of = open(local_filename,"w")
        file_to_save = urllib2.urlopen(file_url)
        of.write(file_to_save.read())
        of.close()

Et ça ne marche pas.
Je n'ai pas vu comment passer l'information que le fichier est binaire
Quelqu'un pourrait-il m'aider ?
Merci

[Alexis.M]

Salut,

Personnellement, j'ai déjà fait ce genre de manip sans aucun problem ni sans avoir quoi que ce soit à préciser.

Peux-tu donner un exemple réel avec une vraie url et ce qui ne marche pas ?

Sur quel système d'exploitation es-tu ? Si sous windows ou mac peut-être faut-il utiliser l'option 'wb' pour l'ouverture.

Sinon la méthode Browser.retrieve() du module mechanize fait le boulot et doit en plus gérer les buffers pour les gros fichiers...

[fatbob]

Salut,

Personnellement, j'ai déjà fait ce genre de manip sans aucun problem ni sans avoir quoi que ce soit à préciser.

Peux-tu donner un exemple réel avec une vraie url et ce qui ne marche pas ?

Sur quel système d'exploitation es-tu ?

Je suis sous W$ XP
Voici un code qui ne marche pas

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
 
def test_download():
    file_url = "http://www.techno-froid.com/file/Physique4.zip"
    filename = file_url.split("/")[-1]
    local_filename=os.path.join("C:/Mes Documents/ReNo/PyPgm/PyUtils/webSpider-Gediff/ziptemp", filename)
    print file_url
    of = open(local_filename,"w")
    file_to_save = urllib2.urlopen(file_url)
    of.write(file_to_save.read())
    of.close()

Pour des questions de firewall, je ne peux pas tester en téléchargeant des fichiers d'internet avec mon programme. Mais si je mets un fichier zip de notre intranet, ça ne fonctionne pas.
Je récupère un fichier qui contient des trucs mais qui ne peut pas être ouvert par le programme prévu.

[N.tox]

comme suggéré par Alexis.M, utiliser 'wb' au lieu de 'w' dans open:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

of = open(local_filename,"wb")

ceci indique que c'est bel et bien un fichier binaire que l'on ouvre.

Sinon, utiliser le module urllib, plus simple, mais surtout beaucoup plus direct question telechargement de fichier:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

urllib.urlretrieve(url,myfilename)

[fatbob]

Bonjour et merci pour ces réponses.
J'avais bien essayé avec "wb" et cela ne fonctionnait pas plus.
J'aime bien la solution urlretrieve qui est plus simple.

En réalité, mon problème venait de ce que le nom de fichier contenait un espace.
Je récupérais le nom à partir des attributs href des balises <a> par BeautifulSoup et il contenait des espaces qui, je ne sais pas pourquoi, empêchaient le téléchargement de se dérouler correctement.
En les remplaçant par des "%20", ça fonctionne.

Merci encore.

[Alexis.M]

tu peux utiliser urllib.quote(chaine) pour "échapper" les caractères non autorisés dans les urls :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
>>> urllib.quote("développer c'est cool")
'd%C3%A9velopper%20c%27est%20cool'