：grequests与多线程请求？

Question

我正在努力使我用Python编写的网络刮刀更快一些。

目前，我启动了一组刮板线程，创建了一个队列，其中包含了我想要抓取的URL列表，并允许它们去队列条目以便它们能够抓取。

grequests声明它是异步的，但我不确定除了触发多个线程(就像我正在做的那样)和在事件完成时使用gevent触发事件之外，sure意味着什么。

除了创建每个作业的线程之外，grequests还能做更多的事情吗?技术上，它会比我前面描述的程序运行得更快吗？

Answer 1

看看这个：

https://adl1995.github.io/a-comparison-of-response-times-using-urllib-grequests-and-asyncio.html

TL;DR：

“使用aiohttp和asyncio似乎是最好的选择。它的响应时间几乎比grequests少50%。”