首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >蜘蛛能在所有管道通过后得到物品吗?

蜘蛛能在所有管道通过后得到物品吗?
EN

Stack Overflow用户
提问于 2018-12-26 03:47:39
回答 1查看 54关注 0票数 0

我的过程是。

  1. 蜘蛛项目转到管道(多个管道)
  2. 项目必须更改,因为管道(可能是翻译,图片)。
  3. 蜘蛛得到更改的项目,并根据项目,请求另一个。

我的问题是。

  1. return item(在蜘蛛中)是没有意义的,功能是完成的。
  2. yield item传递项目后,第一个管道完成。

我想让所有物品都通过管道。

EN

回答 1

Stack Overflow用户

发布于 2018-12-27 12:42:26

您可以使用item_scraped信号来让爬行器知道某一项何时已经传递了所有项目管道。

https://doc.scrapy.org/en/latest/topics/signals.html#item-scraped

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/53927224

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档