我正在使用nopcommerce 3.3我希望搜索引擎不允许我的网站被索引。我创建了一个robot.txt文件
User-agent: *
Disallow: /我把它写在robots.txt文件中,然后放在www.root文件夹中。我只想知道这一步是否足以停止索引,还是我必须做其他什么?
发布于 2014-04-15 11:09:47
这应该是足够的,但它并没有物理阻止机器人。只是请求而已。
而且从技术上讲,它并没有停止索引。它要求机器人不要阅读内容。
说到这一点,谷歌通常会把它排除在搜索结果之外,只要你从一开始就准备好了。
发布于 2014-04-23 14:56:52
也许“一般设置和杂项设置”中的这两个选项可以帮助您:
https://stackoverflow.com/questions/23070904
复制相似问题