使用anemone从网站获取urls列表时出错

Question

代码：

require 'anemone'
Anemone.crawl("http://www.example.com/") do |anemone|
  anemone.on_every_page do |page|
    puts page.url
  end
end

当我尝试这个代码时，我应该得到该网站上所有urls的列表，但我得到的只是网站的名称。可能的错误是什么?如何获得所有urls的列表？

Answer 1

我猜银莲花只是不能遵循重定向或类似的东西，因为"http://example.com“在其他网站上重定向我。你有没有试过抓取其他网站?比如http://stackoverflow.com。