首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >Python urlopen并不适用于所有网站

Python urlopen并不适用于所有网站
EN

Stack Overflow用户
提问于 2020-05-02 23:25:19
回答 1查看 42关注 0票数 0

嗨,我有一个工作代码,它可以完美地打开(从urllib.request的him打开)我告诉他的大多数网站。但由于某些原因,这似乎不适用于某些特定的网站。我甚至没有得到一个错误,我的代码只是永远运行,没有任何进展。我尝试打开的网站都是https网站,包括那些不起作用的网站。但我可以手动打开网站,它工作得很好,所以网站不会出现故障或其他任何情况。有人知道为什么会这样吗?以uReq身份从urllib.request导入uReq打开

代码语言:javascript
复制
url = r'https://www.mouser.de/'
url_text = uReq(url)
html_text = url_text.read()
EN

回答 1

Stack Overflow用户

发布于 2021-08-18 19:32:45

您可能需要使用真正的浏览器所使用的User-Agent。这段代码取自here,是一个如何使用User-Agent的示例。

代码语言:javascript
复制
import urllib.request
req = urllib.request.Request('http://www.example.com/')
req.add_header('Referer', 'http://www.python.org/')
# Customize the default User-Agent header value:
req.add_header('User-Agent', 'urllib-example/0.1 (Contact: . . .)')
r = urllib.request.urlopen(req)
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/61561789

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档