用户代理“gce-蜘蛛”是一个众所周知的骗子，一个糟糕的机器人吗？

Question

我的网站被诈骗使用一些“诈骗-网站窃取我的内容通过代理和服务从他们自己的域名，并取代我的网站在SERP"-technique。

Apache日志告诉我，这个骗局是从以下条目开始的：

185.32.189.38 - - [14/Apr/2017:05:57:32 +0200] "GET / HTTP/1.1" 200 27428 "https://dbwebb.se/" "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)"
185.32.189.38 - - [14/Apr/2017:19:55:46 +0200] "GET / HTTP/1.1" 200 27428 "https://dbwebb.se/" "AppEngine-Google; (+http://code.google.com/appengine; appid: s~gce-spider)"
185.32.189.38 - - [14/Apr/2017:19:55:47 +0200] "GET / HTTP/1.1" 200 24445 "https://dbwebb.se/" "AppEngine-Google; (+http://code.google.com/appengine; appid: s~gce-spider)"
185.32.189.38 - - [14/Apr/2017:19:55:50 +0200] "GET / HTTP/1.1" 200 27428 "https://dbwebb.se/" "AppEngine-Google; (+http://code.google.com/appengine; appid: s~gce-spider)"

这个骗局似乎起源于用户代理：

"AppEngine-Google; (+http://code.google.com/appengine; appid: s~gce-spider)"

在2017年6月23日之前，那个用户代理每14天都会访问我的网站。

这个包含gce-spider的用户代理是一个众所周知的骗子，一个非常糟糕的机器人吗？

Answer 1

这些用户代理的第一部分：

AppEngine-Google; (+http://code.google.com/appengine; appid

表明这是运行在上的某种软件。这是一个普通的用户代理。

这是一个常见的用户代理片段，谷歌将其添加到所有应用程序中。接下来的部分是开发人员选择的“应用程序名称”。

在机器人攻击你的服务器并窃取你的内容的情况下，它是：gce-spider (有时应用程序名称前面也有一个s~ )。

从用户代理中可以获得的信息不多。

搜索一下，它至少在2016年就已经出现了。如果你确定它在窃取内容，你应该把它报告给谷歌，特别是考虑到它在它的应用程序名称中使用"GCE“()--对我来说，这应该是一个保留词！(就像你不能创建一个包含" Facebook“这个词的Facebook应用程序，因为它似乎具有误导性)