来自Google引擎用户代理的大量爬行请求

Question

我受“谷歌应用工程师-谷歌”UserAgent的严重影响。在http服务器上每秒接收5/6请求。这个机器人正在爬行我的网站，就像GoogleBot一样。

下面是我访问日志中url的示例。

72.14.192.3 -- 2010年年5月19日:01:27:06 +0000 "GET /some-url/etc-123.htm HTTP/1.1“200 4707 "-”AppEngine；(+http://code.google.com/appengine；appid: harpy000)“

我已经检查了它在谷歌公司注册的ip地址。

有人能告诉我在哪里可以报告滥用谷歌公司或任何有关这一问题的信息。

谢谢!

Answer 1

您可以使用以下形式报告Google滥用情况：http://code.google.com/support/bin/request.py?contact_type=AppEngineContact。应用程序在这个地址有一个网页：http://harpy000.appspot.com/。还有一个指向Twitter页面的链接(所有者？)，也许你可以联系他。