在我的网站上,我们记录用户IP,以确保我们能够适当地缓和和防止滥用。
我们知道代理,如Opera、Tor和其他。
然而,我不知道谷歌本身有一个代理,除了“数据保护程序”的功能。
有些用户带着IP来到我的网站,例如:
66.102.8.219 66.249.91.121
有更多的IP。这些IP是AS15169 Google的所有者,具有以下主机名:
google.com谷歌-代理-66-102-8-219
根据本页,https://developers.chrome.com/multidevice/data-compression
报头X-Forwarded-For将与用户的真实IP一起出现。
我们会调查这个头像。
但是,当用户随上面的IP一起来时,当我转储报头时,这个报头就不存在了,而且用户的IP中根本没有其他报头。
另外,根据这个页面,https://developer.mozilla.org/en-US/docs/Web/HTTP/Headers/Cache-Control
对于在HTTPS上服务的内容,高速缓存控制不转换指令是多余的,因为代理不能在安全连接上转换有效负载。
因此,我不认为上面的is与数据保存功能有关,因为我的网站是完全SSLed的。
-
发布于 2019-03-27 00:40:15
阅读用户代理,它可能是一个谷歌机器人爬行。如果您不想被索引设置为robots.txt,那么它们是很好的行为。
关于谷歌网站管理员的帮助,参考:
编辑:如果它不是一个爬虫,它可能是企图使用各种谷歌服务作为代理。多年来,webmasters.se的许多理论都没有定论:这是谷歌代理是假的爬虫吗:谷歌66-249-81-131.google.com?
不管是什么,决定这些特工是否滥用了你的系统。阻止,利率限制,并尝试robots.txt无论如何,看看他们的行为是否像一个机器人。
https://serverfault.com/questions/959984
复制相似问题