Discussion :

[stinng]

Bonjour,

je souhaiterais créer un robot d’indexation pour site web en python. Je veux donc commencer par le faire en locale puis le faire avec des sites web.

Avez-vous des pistes à me proposer comme des modules utiles car sur Internet cela concerne majoritairement des programmes en php. Quelles modules est le mieux pour gérer l'interaction avec des sites Internet?

Pour information je programme en python 2.7

[wiztricks]

Salut,

je souhaiterais créer un robot d’indexation pour site web en python. Je veux donc commencer par le faire en locale puis le faire avec des sites web.

Pourquoi ne pas commencer par regarder ce que sait faire scrapy ?

Avez-vous des pistes à me proposer comme des modules utiles car sur Internet cela concerne majoritairement des programmes en php. Quelles modules est le mieux pour gérer l'interaction avec des sites Internet?

Si vous tenez à ré-inventer la roue, les bibliothèques externes requests et beautifoulsoup sont un bon début.

Pour information je programme en python 2.7

Pourquoi écrire de nouveaux codes en Python2?

- W

[stinng]

Merci beaucoup.
J'ai toujours programmer en 2.7, je connais un peu le 3 mais je ne le maîtrise pas assez je pense pour faire ce programme en 3

[wiztricks]

J'ai toujours programmer en 2.7, je connais un peu le 3 mais je ne le maîtrise pas assez je pense pour faire ce programme en 3

Ce projet serait une opportunité de vous y mettre pour vous rendre compte que les différences sont suffisamment subtiles pour ne pas poser de problèmes. A vous de voir.

- W

[stinng]

quelles sont les avantages du 3?

[wiztricks]

quelles sont les avantages du 3?

Côté avantages, la littérature abonde. Côté inconvénients, le support de la 2.7 s'arrêtera en 2020. Quatre ans c'est à la fois assez long pour migrer vos applications mais trop court pour alourdir la barque avec de nouvelles. De plus, vous rencontrerez de plus en plus de monde qui ne voudra plus perdre son temps à essayer de vous aider si vous restez en 2.7.
A vous de voir.

- W

[stinng]

d'accord je vais essayer de m'y mettre

[Laurent 1973]

quelles sont les avantages du 3?

Un gros avantage que j'ai vu à Python 3 est l'utilisation des chaine uni-code par défaut.
Surtout quand on développe une petite application avec autres que l'anglais: c'est à dire avec des accents et autres caractères "bizarre"