Discussion :

[Pearate]

Bonjour,
Je n'arrive plus à accéder à un site web sur lequel je scrape des données depuis 3 mois.
J'ai la réponse suivante avec scrapy shell si je test un des liens à scraper:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
twisted.internet.error.TCPTimedOutError: TCP connection timed out: 10060: Une tentative de connexion a échoué 
car le parti connecté n’a pas répondu convenablement au-delà d’une certaine durée ou une connexion établie a échoué car l’
hôte de connexion n’a pas répondu..

Je n'arrive plus a y accéder non plus avec mes différents navigateurs : firefox ou google.
Je pense pas que le site soit down, j'y accède sur mon mobile ou avec un navigateur Tor.

D'après-vous, est-ce que je suis "blacklisté" ? Si oui je suis surpris que ça est mis autant de temps, je scrape depuis 3 mois...
Et sinon, est-ce que vous avez une solution ? Merci

Pour le côté technique, je suis sous window 10, python 3, j'utilise scrapy + splash via docker.

[wiztricks]

Salut,

D'après-vous, est-ce que je suis "blacklisté" ? Si oui je suis surpris que ça est mis autant de temps, je scrape depuis 3 mois...
Et sinon, est-ce que vous avez une solution ? Merci

Pensez vous sérieusement que ces questions soient en rapport avec de la programmation Python?

- W

[Pearate]

Salut,

Pensez vous sérieusement que ces questions soient en rapport avec de la programmation Python?

- W

Depuis quand scrapy n'est-il plus une bibliothèque python ?
Je suis sensé répondre quoi ?
Ah si, j'ai trouvé : "Pensez-vous vraiment que votre réponse soit en rapport avec ma question ?"

[wiztricks]

Salut,

Depuis quand scrapy n'est-il plus une bibliothèque python ?
Je suis sensé répondre quoi ?
Ah si, j'ai trouvé : "Pensez-vous vraiment que votre réponse soit en rapport avec ma question ?"

Votre question est juste "est-ce que je suis "blacklisté" ?".
Pour le confirmer, il faudrait avoir accès à cette "blacklist".

A défaut, c'est côté réseau/serveur que çà se passe - et vous l'avez confirmé en testant l'accès avec vos navigateurs (qui n'utilisent pas Scrapy).

- W

[Pearate]

Salut,

Votre question est juste "est-ce que je suis "blacklisté" ?".
Pour le confirmer, il faudrait avoir accès à cette "blacklist".

A défaut, c'est côté réseau/serveur que çà se passe - et vous l'avez confirmé en testant l'accès avec vos navigateurs (qui n'utilisent pas Scrapy).

- W

Je pensais trouver quelqu'un qui a eu un souci similaire, et notamment l’erreur "TCP timed out: 10060" .
Car quand on fait une recherche sur google, il y a une erreur récurrente liée à windows. Et peut-être un problème de configuration.
C'est pas grave, j'ai fait mes recherches et je vais essayer avec un proxy.
Merci quand même.