developpement application (parseur html, download)

Bonjour, récemment j'ai développer une min-appli web en php, dont le but et de parser un site web (lecture du code source), d'en retirer les liens portant sur des fichier avec une extension donnée (<a href= "www.blabla.fr/fichier.ext"/>)
et ensuite de le télécharger (puis stocker les liens en bdd).

Elle marche correctement cependant, je n'ai pas envie de l'utiliser sur le web, je souhaite la faire marcher en local, pour l'instant j'utilise apache.

La raison pour laquelle je m'adresse dans cette partie du forum, est que mêm si ça marche, ce n'est pas vraiment très puissant (parsing, dl, création de repertoire...).
Donc je voudrais savoir si c'est possible de réaliser la même chose en java(ou sinon un langage plus approprié), et surtout si vous pensez que l'appli serait plus puissante.

Merci de vos réponse je suis ouvert à tout conseil et toutes critiques

Tu peux en effet la réaliser en Java ou n'importe quel autre langage pour faire des application de type Desktop(C++/C#/Delphi/...).
Le fait de se débarrasser de toute la partie serveur devrait être bénéfique au performances. Par contre je n'ai pas une idée précise de la différence de performance Java/Php.

As tu quelques connaissance en java?

Merci de ta réponse
Oui j'ai déja quelques bonne notions en java c'est pour ça que je privilège ce langage à d'autre tels que le C, C++...

Après reste à savoir si l'accès à des fichier sur internet est optimisé en java par rapport au php.

Du code java et du code PHP, il n'y a pas photo
=> En java tu as une architecture plus claire ( builders faiblement dépendants ), et donc blindage possible de ton appli

Citation:

---

Après reste à savoir si l'accès à des fichier sur internet est optimisé en java par rapport au php.

---

Je pense que la vitesse d'accès a un fichier sur internet dépend plus de la connexion que du langage utilisé.

Citation:

---

Du code java et du code PHP, il n'y a pas photo
=> En java tu as une architecture plus claire ( builders faiblement dépendants ), et donc blindage possible de ton appli

---

Il très facile de faire quelque chose de moche en java. Même si c'est vrai qu'en PHP c'est encore plus facile.

De plus, architecture claire ne veut pas forcément dire plus puissante au niveau performance. Je peux te certifier que quand je développait sur mobile, on ne reculait devant aucune horreur pour gagner en vitesse et taille.

sinon, en java, un petit coup de commons http client pour pomper la page, un petit coup de nekohtml pour transformer ça en arbre DOM, et un petit coup de xpath pour extraire tout les liens. Avoir la liste des liens pour une url donnée devrais pas prendre plus d'une 100 aine de ligne avec ces outils ;)

En même temps même pas besoin de commons http client, S'il s'agit seulement de lire des pages web.
Les trois ligne suivantes devraient suffire:

Code:

---

1 2 3

URL url = new URL("htp://www.monsite.com"); URLConnection cnx = url.openConnection(); BufferedReader in = new BufferedReader(new InputStreamReader(cnx.getInputStream()));

---

Citation:

---

Envoyé par Uther

En même temps même pas besoin de commons http client

---

Oui, tout dépend du besoin. La lib http-client offre des fonctionnalités qui peuvent être utiles :

• Support HTTPS
• Prise en charge des proxies
• Gestion des cookies
• Gestion des connexions
• Configuration des timeouts

Certaines fonctionnalités que tu cites sont maintenant gérées l'api java standard :
* Support HTTPS (depuis java 1.4)
* Prise en charge des proxies (depuis java 5.0)
* Gestion des cookies (depuis java 5.0, amélioré en java 6.0)
* Gestion des timleout(depuis java 5.0)

Yep.

Merci pour vos réponse en tout cas, j'ai essayer la library html-parser pour avoir le code source mais bon c'est vrai que ce que propose Uther est plus simple est donc moins lourd je pense, après un bon coup de xpath et voilà.

Bon bin je teste ça en java et je posterais les résultats de rendu, si quelqu'un à d'autres idées n'hésitez pas