在我的Windows机器上运行得很好,但是当我在我的linux服务器上运行它时,它会出现错误111。为什么会这样呢?
当我使用curl时,我得到了以下错误:curl: (7) Failed connect to proxy.crawlera.com:8010; Connection refused
发布于 2018-10-18 21:07:36
在处理端口、CPanel (也许是Linux?)时,结果证明了这一点。默认情况下,如果未在防火墙中白名单,则阻塞端口。我通过WHM打开它,因为我使用了CPanel,现在一切都很好。
发布于 2018-10-18 03:04:25
它很可能与Windows或Linux无关,而是与Scrapy的用户代理有关。尝试做某事就像在settings.py里这样
USER_AGENT = 'Mozilla/5.0 (X11; Linux x86_64; rv:7.0.1) Gecko/20100101 Firefox/7.7https://stackoverflow.com/questions/52866297
复制相似问题