Python机械化不会打开这些站点

Question

我正在使用Python的机械化模块。我遇到了三个不同的站点，它们不能直接通过机械打开：

1. wiki://wiki/Dog(新用户，不能发布超过两个链接T)
2. upl=618l914l0l1027l3l2l0l0l0l0l173l173l0.1l1l0
3. http://www.cpsc.gov/cpscpub/prerel/prhtml03/03059.html 导入机械化br = mechanize.Browser() br.set_handle_robots(False)

添加以下代码可以让机器打开并解析wikipedia文章和google搜索结果：

    br.addheaders = [('User-agent', 'Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.9.0.1) Gecko/2008071615 Fedora/3.0.1-1.fc9 Firefox/3.0.1')] 

但是，我的解决方案并不能与CPSC.gov网站相媲美--当我尝试用机械浏览器打开它时，我的python会结冰--甚至连键盘都不能打断它。

这里发生了什么事？

Answer 1

在cpsc.gov站点中，看起来有一个刷新头没有被机械化HTTPRefreshProcessor正确地处理。但是，您可以解决以下问题：

import mechanize

url = 'http://www.cpsc.gov/cpscpub/prerel/prhtml03/03059.html'
br = mechanize.Browser()
br.set_handle_refresh(False)
br.open(url)