Django&Python，刮页以填充数据库

Question

我让django和模特们一起跑。现在，我想用来自不同网站的信息填充数据库。我知道，刮来了。我所缺少的是知识，如果有什么工具可以使用Django来抓取与现有数据库/模型兼容的页面呢？

请注意，我想要运行这个刮擦任务，例如每5分钟，所以它不会是一次运行脚本。

你能指出我应该使用哪些工具吗？我是应该和Django呆在一起还是用一些外部的东西？

Answer 1

你可以在你的Django项目中使用芹菜，用芹菜你将创建任务来刮刮你想要的网站，并在你的模型中使用它。

最难的部分应该是刮它自己，插入数据在您的模型是容易的。