Discussion :

[doc malkovich]

Hello,

J'essaye d'écrire un script pour copier/mirrorer un répertoire local sur un site FTP distant avec la librairie standard ftplib en python 3.2.
Ca marche bien, sauf les accents !
J'ai déjà copié une partie avec Filezilla, où le serveur est configuré en UTF8. Mais je n'arrive pas à traiter les fichiers ou les répertoires avec des accents, l'encodage ne semble pas le même.

Mon script :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
 
# -*- coding:utf-8 -*-
from ftplib import FTP
import sys
 
USER = 'user'
PASS = 'pwd'
SERVER = 'server.dns.com'
PORT = 21
 
print("connection")
ftp = FTP()
ftp.connect(SERVER, PORT)
ftp.login(USER, PASS)
print("etat", ftp.getwelcome())
ftp.set_pasv(True)
 
ftp.sendcmd("OPTS UTF8 ON")  # pour passer en UTF8 comme dans Filezilla
 
ftp.cwd('/test')
#le répertoire /test distant contient uniquement un fichier tést.txt
 
print("test création répertoire avec accents")
ftp.mkd("aéo1")
ftp.sendcmd("MKD aéo2")         # autre méthode ...
 
print("test récupération des éléments du répertoire")
x=ftp.nlst()
print(x)
# ['.', '..', 'aéo1', 'aéo2', 'tést.txt']
 
# résultats sous filezilla :
# en forçant l'UTF8, on a aéo1  aéo2 tést.txt mais impossible de rentrer / modifier les répertoires aéo1 et aéo2.
# sinon avec le jeu de caractères local : aéo1 aéo2 et tést.txt
 
# test avec encodage UTF8 ... enfin je crois j'ai vu ça quelquepart ...
cmd="MKD aéo3"
ftp.sendcmd(cmd.encode('utf-8'))
# erreur TypeError: can't concat bytes to str
 
ftp.quit()

Là je suiis perdu
Il me semblait qu'en v3 python les chaînes de caractères étaient par défaut codées en UTF8 ...

Comment je peux récupérer les noms des fichiers avec les bons accents sur le serveur FTP ?

Merci

[deusyss]

Salut,

ça fait un moment que j'ai pas fait de transfert FTP. Mais de memeoire, il n'y a pas une option pour choisir entre mode de transmission ASCII (table ascii, donc pas d'accent) et binaire (copie conforme)? Je sait que j'avais souvent des soucis avec filezilla avec ce parametrage.

EDIT: je sais pas si cela peut taider en plus: http://python.developpez.com/tutoriels/python-en-bref/#LV-L

[wiztricks]

Salut,

Python3 est par défaut utf-8 mais les protocoles réseau ont leurs propres "default".

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
ftp.sendcmd("OPTS UTF8 ON")  # pour passer en UTF8 comme dans Filezilla
ftp.encoding='utf-8' # <-- ajoutez cette ligne juste après.

ça fait un moment que j'ai pas fait de transfert FTP. Mais de memeoire, il n'y a pas une option pour choisir entre mode de transmission ASCII (table ascii, donc pas d'accent) et binaire (copie conforme)? Je sait que j'avais souvent des soucis avec filezilla avec ce parametrage.[/URL]

Si c'est une question pourquoi ne pas la poster?

- W

[tyrtamos]

Bonjour,

Sur mon site web, je n'ai pas le serveur filezilla mais le proFTPD. Cependant, pour certaines opérations, par exemple pour avoir la taille d'un fichier avec .size, il est nécessaire de demander le mode binaire. Je le fais avec:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

ftp.sendcmd('TYPE I')

Ce n'est pas sur la doc de ftplib, mais ça marche.

A essayer!

[edit] je viens d'essayer pour le problème d'encodage, et je ne rencontre aucun problème.

Avec le serveur ftp proFTPD et Python 3.2:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
# crée un répertoire avec des accents (repdest=le répertoire ftp dans lequel on fait l'opération)
rep = "abcéèçàùôï"
ftp.mkd(repdest + '/' + rep)

Avec mon client ftp filezilla, je constate que le répertoire a bien été créé correctement.

Et le supprimer:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

ftp.rmd(repdest + '/' + rep)

Le script Python 3 est encodée et stockée sur disque en utf-8 , mais lors de l'exécution, les chaines de caractères sont converties en unicode interne par défaut (unicode interne=version simplifiée de l'utf-16 _ 2 octets par caractère). Et les fonctions de ftplib semblent avaler l'unicode sans discuter. Mais peut-être que mon serveur ftp "proFTPD" ne fonctionne pas de la même façon que le serveur filezilla?

[doc malkovich]

Hello,

Merci de vos réponses

Mais de memeoire, il n'y a pas une option pour choisir entre mode de transmission ASCII (table ascii, donc pas d'accent) et binaire (copie conforme)?

A ce que j'ai compris dans python cela correspond aux commandes retrlines, retrbinary, storlines et storbinary. Ou alors passer par la commande ftp "TYPE I" comme le dit tyrtamos ... Mais même avec ça ça ne marche pas pour les accents dans les noms de fichiers

je sais pas si cela peut taider en plus: http://python.developpez.com/tutoriels/python-en-bref/#LV-L

Très bon tuto, je l'ai suivi pour débuter en python
Mais il ne parle pas des problèmes d'accents

Sur mon site web, je n'ai pas le serveur filezilla mais le proFTPD. Cependant, pour certaines opérations, par exemple pour avoir la taille d'un fichier avec .size, il est nécessaire de demander le mode binaire. Je le fais avec:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

ftp.sendcmd('TYPE I')

Je me suis mal exprimé, je prends Filezilla client pour contrôler les fichiers envoyés (et aussi envoyer certains fichiers manuellement). Le serveur FTP est un Pure-FTPd sur un NAS distant (sous linux). Dans le gestionnaire des sites FTP de Filezilla il y a un onglet "Jeu de caractères" où on peut donner l'encodage des caractères pour les noms des fichiers. J'ai mis par défaut UTF-8. Et ça ne pose pas de problème dans l'affichage des dossiers sur la console web du NAS, ou via samba.

Avec mon client ftp filezilla, je constate que le répertoire a bien été créé correctement.

Pareil pour moi, mais :

• le nom du fichier envoyé précédemment est erroné dans Filezilla (tést.txt au lieu de tést.txt) alors que les objets créés sous python apparaissent bien
• dans la console FTP j'ai "Séquence de caractères reçue invalide, désactivation de UTF-8. Sélectionnez l'option UTF-8 dans le Gestionnaire de Sites pour forcer l'utilisation d'UTF-8."

A ce que j'ai vu sur le net, ftplib est une des librairies qui n'a pas été entièrement revue en UTF-8 ... Et je ne m'en sors pas avec les encodages

[wiztricks]

A ce que j'ai vu sur le net, ftplib est une des librairies qui n'a pas été entièrement revue en UTF-8 ... Et je ne m'en sors pas avec les encodages

Par défaut, l'encoding de ftplib est "latin-1" (c'est ce que vous avez dans instance ftp.encoding).
Si vous dites "cause moi en utf-8" avec le ftp.sendcmd("OPTS UTF8 ON"), le 'é' de tést.txt sera encodé sur 2 bytes en utf-8 mais son "rendu" en latin-1, va sortir le 'é' en deux glyphs: tést.txt.
D'où le nécessaire ftp.encoding = 'utf-8'.
Mais il n'est pas certain qu'il soit suffisant pour toutes les commandes "ftp", car les RFC sur le sujet ne sont pas assez "strictes" pour permettre aux développeurs de s'en sortir proprement.

- W

[doc malkovich]

Ma foi, la solution d'ajouter

ftp.encoding = 'utf-8'

me convient, les méthodes que j'utilise ont retrouvé les accents

Je me contenterai de celles-là si elles marchent !

Merci wiztricks

[wiztricks]

Salut,

L'encoding des noms de fichiers passé dans les commandes ftp n’intéresse que les échanges entre le client et le serveur ftp.
Le programmeur Python se contente d'expédier et de récupérer des "strings" en Unicode avec le client.
Il se fout pas mal de savoir comment sera sérialisé le dialogue entre le client et le serveur.
S'il habite en Europe de l'Ouest, "latin-1" est assez bon même si c'est en dehors des clous des "standards" FTP: ASCII ou UTF8, les autres encodings sont "indéfinis" et non supportés.

Une amélioration de la ftplib pourrait être l'ajout de méthodes ".set_utf8_encoding_{on|off}" qui s'occupe d'expédier un FEAT pour s'assurer que le serveur "supporte" UTF8, expédie l'OPTS UTF8 ON, mette à jour .encoding,...
En attendant, c'est au programmeur d'écrire ces quelques lignes.

- W