Discussion :

[al1_24]

Bonjour,

J'ai un traitement qui attend un fichier dans un répertoire donné. Ce fichier est déposé de l'extérieur par un transfert FTP qui peut durer plusieurs dizaines de minutes.
Malheureusement, mon traitement prend en compte le fichier dès qu'il apparait sur le disque, sans attendre qu'il soit complet, ce qui occasionne la perte des derniers enregistrements. Pour éviter ce problème, il faudrait bien sur ne commencer le traitement qu'une fois la réception terminée.
Je précise que les solutions simples telles qu'envoyer la taille du fichier, ajouter une ligne de fin de fichier ou envoyer un fichier marqueur après le transfert ont toutes été refusées par notre fournisseur de données, qui ne souhaite pas modifier ses traitements.
Comment donc puis-je identifier qu'un fichier n'est plus en cours de mise à jour ?

Le traitement actuel est basé sur une boucle de ce type :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
while ! [ -f fichier ] && condition_extérieure
do
    sleep 60
done
if [ -f fichier ]
then
    # Commencer le traitement
fi

[zipe31]

Salut,

Peut être devrais-tu regarder du côté de la commande lsof ?

[N_BaH]

Bonjour,

inotifywait peut être utile aussi.

[gangsoleil]

Bonjour,

Est-ce que la qualite du reseau est correcte ? Si oui, tu peux tenter de te baser sur la taille du fichier : si elle ne change pas pendant un temps suffisant, il est probable que l'ecriture soit finie.

isnotifywait te permettra de savoir si quelqu'un fait un close dessus, mais si rien ne se passe pendant un certain temps, ca ne veut pas pour autant dire que le transfert est fini, malheureusement.

Apres, il te reste la solution de travailler sur une copie du fichier, eventuellement en tronquant le fichier qui est en cours d'ecriture pour etre certain de ne pas traiter deux fois les memes donnees.