嗨,我有一个工作代码,它可以完美地打开(从urllib.request的him打开)我告诉他的大多数网站。但由于某些原因,这似乎不适用于某些特定的网站。我甚至没有得到一个错误,我的代码只是永远运行,没有任何进展。我尝试打开的网站都是https网站,包括那些不起作用的网站。但我可以手动打开网站,它工作得很好,所以网站不会出现故障或其他任何情况。有人知道为什么会这样吗?以uReq身份从urllib.request导入uReq打开
url = r'https://www.mouser.de/'
url_text = uReq(url)
html_text = url_text.read()发布于 2021-08-18 19:32:45
您可能需要使用真正的浏览器所使用的User-Agent。这段代码取自here,是一个如何使用User-Agent的示例。
import urllib.request
req = urllib.request.Request('http://www.example.com/')
req.add_header('Referer', 'http://www.python.org/')
# Customize the default User-Agent header value:
req.add_header('User-Agent', 'urllib-example/0.1 (Contact: . . .)')
r = urllib.request.urlopen(req)https://stackoverflow.com/questions/61561789
复制相似问题