Discussion :

[marietar]

Bonjour
est-il possible de webscrapper les pages linkedin?
j'aimerai juste récupérer le nom des personnes d'une entreprise
Pour une page donnée, je pense que je sais le faire avec beautifulsoup.

par exemple avec cette page:
https://www.linkedin.com/search/resu...SEARCH&sid=ZFf
, je pense que je sais faire. jai regardé le code html et j'ai repéré le balises.

le probleme, c'est que j'ai 10 pages de la sorte et l'url de chaque page est différente, les derniers caractères semblent être aléatoire et je ne vois comment comment charger ces url en avance.
https://www.linkedin.com/search/resu...page=2&sid=ZFf
https://www.linkedin.com/search/resu...page=3&sid=dhF

Dans ce cas là, c'est possible de webscrapper?

[wiztricks]

Salut,

La difficulté du "scrapping" est de trouver comment scrapper... mais ce n'est pas parce que vous programmer avec Python que ça en fait un sujet pour ce langage là pour autant (il y a une rubrique Web...).
note: récupérer les informations pour fabriquer l'URL... dépend du site Web pas du langage.

Sachez aussi que le "scrapping" (au sens automatiser la navigation sur un site Web comme le ferait un utilisateur derrière son navigateur) n'est pas la seule option pour "interagir" avec des site Web qui ont une API programmatique (comme linkedin).

- W