在python中实现webautomation机器人的多线程还是多处理？

Question

我的脚本扫描nike.com上的某些产品的价格，并将不断抓取产品的价格，直到它开始销售，在这一点上，它将创建多个实例，以登录到多个帐户购买产品。

我已经有了抓取网站和检出产品的功能，但我想知道我应该使用多进程还是多线程来执行登录和检出过程？

在处理web自动化过程的多个实例时，哪一个会更有效？如果有帮助的话，我在firefox中使用selenium headless。

Answer 1

线程的创建速度更快，占用的内存更小，因为它们共享内存，并且可以通过更新变量进行通信，因为它们都可以访问相同的内存空间。

我个人很喜欢这个multiprocessing.dummy模块，它可以让你用多进程应用程序接口处理线程，这非常方便。