当我尝试保存到MongoDB时龙卷风阻塞

Question

我试着通过龙卷风做一个网络蜘蛛。我想将评论保存到我的磁盘或数据库中。我应该使用什么来快速完成这些过程？

当我尝试保存文件时，所有东西似乎都阻塞了，即使我使用的是gen.coroutine。数据库是MongoDB

Answer 1

在使用Tornado时，如果您不希望在与第三方服务通信时阻塞Tornado，则需要使用异步库。下面是Tornado的异步库列表：

https://github.com/tornadoweb/tornado/wiki/Links

为了满足您的特定需求，您可以查看Mongo的这些库：

http://github.com/bitly/asyncmongo

• Motor - http://github.com/mongodb/motor/

• PyEnty - https://github.com/leodesouza/pyenty/

• asyncmongo