Télécharger un fichier distant avec une URL dynamique [Résolu]

[clement106]

Bonjour,

Je dois pour une de mes applications télécharger un fichier XML depuis un serveur distant sur mon serveur de production.

J'utilise pour ce faire la commande:

Code :

exec('wget http://un-site.com/un-fichier.xml');

Cette commande marche sur mon serveur de production avec des fichiers contenant une extension valable (testé avec des fichiers de 60Mo).

Mon problème c'est que je dois télécharger un fichier avec une URL dynamique du genre: http://un-site.com/application.php?i...r=334324343423

Avec la commande que j'utilise, je récupère bien le fichier mais celui est tronqué (mauvaise taille et code XML contenant des erreurs).

Auriez-vous une solution pour télécharger des fichiers via des urls dynamique? Merci d'avance pour votre aide

[stealth35]

aucun interet a utilise wget, PHP fait ça très bien tout seul, un simple copy suffit

[NaeiKinDus]

Si tu souhaites faire un traitement sur ce que contient le fichier, tu peux aussi faire un file_get_contents() qui lui retourne un string avec le contenu du fichier au lieu de le placer sur le disque.

[clement106]

Merci infiniment stealth35.

Mais pourquoi je me suis embêté avec cette commande... j'ignorais complétement que la fonction copy() marchait aussi avec des fichiers distants.

Si tu souhaites faire un traitement sur ce que contient le fichier, tu peux aussi faire un file_get_contents() qui lui retourne un string avec le contenu du fichier au lieu de le placer sur le disque.

Merci pour cette info. J'ai besoin d'avoir le(s) fichier(s) XML sur le serveur pour ensuite pouvoir les parcourir avec la classe SimpleXML.
Au tout départ j'utilisais justement cette fonction mais j'avais tout de suite un super warning: Limit memory...

Voilà déjà un problème de résolu. Il ne m'en reste plus qu'un...arriver à télécharger un fichier XML de 180Mo avec un max_execution_time de 60 secondes...

Ca fera surement l'objet d'un nouveau poste.

[Thes32]

Envoyé par clement106

Merci pour cette info. J'ai besoin d'avoir le(s) fichier(s) XML sur le serveur pour ensuite pouvoir les parcourir avec la classe SimpleXML.

SimpleXML accepte également des fichiers distants...

Code :

1
2
 
$XMLObjet = new SimpleXMLElement( 'http://un-site.com/un-fichier.xml', NULL, true );

[clement106]

Quand je saurais tout

En fait je suis quand même obligé de le télécharger à cause de mon max_execution_time

Le but est de télécharger un fichier XML référencent des produits d'un e-commerce et de les placer dans ma propre base de données MySQL.

Le téléchargement d'un fichier de 20Mo prend déjà plusieurs 10 aines de secondes, du coûps il ne me reste plus assez de temps pour faire plusieurs centaines d' enregistrements dans ma base de données. J'ai donc créé un Cron qui télécharge / met à jour le fichier et un deuxième qui s'occupe de le parser pour ensuite enregistrer les produits dans ma base de données.

Si j'essaye de lire mon fameux fichier à distance avec la classe SimpleXML, avant qu'elle puisse l'utiliser il y aura déjà heu le fameux execution_time_limit.

Je pense que le seul moyen serait de prendre un serveur dédié pour pouvoir modifier ce fameux réglage...

[stealth35]

si ton fichier XML est gros faut le lire en streaming avec XML Parser, ensuite tu pourra mettre les sous parties avec SimpleXML

[clement106]

Merci pour l'info.

J'ai quand même de la peine à comprendre. Avant que PHP puisse lire le fichier qui se trouve sur le serveur distant, il faut déjà qu'il le télécharge dans son entièreté?
Si c'est le cas le max_execution_time sera déjà dépassé.

J'ai trouvé un lien qui pourrait aller dans ton sens si je t'ai bien compris:
http://dsampaolo.com/blog/42-parser-...xmlreader.html

[stealth35]

Envoyé par clement106

J'ai quand même de la peine à comprendre. Avant que PHP puisse lire le fichier qui se trouve sur le serveur distant, il faut déjà qu'il le télécharge dans son entièreté?

pas en stream, il va le lire séquentiellement