我怎么才能阻止google抓取我的页面，而仍然让百度来做呢？
我怎么才能阻止google抓取我的页面，而仍然让百度来做呢？
提问于 2019-06-25 16:54:45
我只想阻止谷歌在我的网站上爬行特定的页面，但我仍然希望其他搜索引擎(首先是百度)来爬行它。
我甚至不知道这是否可能。
回答 1
Stack Overflow用户
发布于 2019-06-25 17:26:12
您需要创建一个robots.txt文件来阻止谷歌的userAgent
//在robots.txt中
User-agent: Googlebot
Disallow: /
User-agent: *
Allow: /点击此处了解更多关于robots.txt的信息：https://support.google.com/webmasters/answer/6062596?hl=en
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/56750244
复制相关文章
相似问题
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号