禁用googlebot抓取www

Question

我在.htaccess中有www重定向。所以www.example.com得到了301重定向到example.com，但谷歌仍然试图获取www.example.com。

我可以禁用谷歌机器人抓取www.example.com吗？例如来自webaster tools或robots.txt？

Answer 1

在Google网站管理员工具中，您可以设置您的首选主机名-使用或不使用www，但这不是来自Google的保证。从www到non-www你有301个，Googlebot可能会尊重你的意愿。