首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >我在使用captcha时遇到了并发问题

我在使用captcha时遇到了并发问题
EN

Stack Overflow用户
提问于 2019-12-17 13:27:54
回答 1查看 78关注 0票数 0

我在互联网上到处寻找解决方案,但没有找到任何解决方案。我正在使用captcha解决api来解决scrapy-splash中的captcha,但是当captcha页面出现时,scrapy在尝试抓取下一页时向api发送请求。这是由于并发造成的。我试过CONCURRENT_REQUESTS=1,但结果是一样的。我试过设置等待和暂停引擎,但在大多数情况下,两个或更多线程完全在同一行到达,因此当第一线程暂停引擎时,2个或更多线程也会暂停引擎并尝试解决验证码。有没有人能提点建议来解决这个问题?

对不起,如果你不明白,请评论你的任何问题,我会在几秒钟内回复

EN

回答 1

Stack Overflow用户

发布于 2019-12-17 23:39:44

对API调用使用阻塞HTTP客户端库(例如,请求)。

票数 -1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/59368079

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档