首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Scrapy没有抓取url中的百分号

问Scrapy没有抓取url中的百分号
EN

Stack Overflow用户
提问于 2017-02-04 02:01:09
回答 2查看 130关注 0票数 0

尝试使用Scrapy抓取图像链接。

这就是我要抓取的链接。

http://www.cars4sale.com/carimages/20TH%FEB%032.JPG

这就是它保存在json文件中的方式。请注意,百分号已替换为空格。

http://www.cars4sale.com/carimages/20TH 2月032.JPG

所以当我显示这个链接时,我得到了一个404错误,因为这个链接是错误的。

怎样才能让Scrapy刮掉百分号?

EN

回答 2

Stack Overflow用户

发布于 2017-02-04 02:05:21

您可以使用

代码语言:javascript
复制
urllib.quote(urlWithSpaceInIt)

你不需要对这些破烂的东西做任何事情。在访问之前,只需引用url即可。

票数 1
EN

Stack Overflow用户

发布于 2017-02-04 05:08:23

好的,谢谢你的评论,但我没有足够的经验来解决任何建议的方法,但他们帮助我得到了最终的代码,为我工作。

还有一个我之前没有注意到的%是20。

下面是我在JavaScript中做的将%20添加到URL中的操作。

img src=“+ datai.img.replace(/ | /g,"%20")

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/42030318

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档