在运行部署在本地IIS中的asp.net网站时,我收到了一条消息:*用户代理:* Disallow: /。我为什么会收到这个消息?我如何克服这个问题并成功地运行我的网站?
提前谢谢
发布于 2013-07-24 05:25:22
这是robots.txt文件中的条目。
它的意思是:
User-agent: *意味着本节适用于所有机器人。Disallow: /告诉机器人,它不应该访问网站上的任何页面。
注意:检查顶级目录中的robots.txt文件,或者删除它,或者更改配置以允许访问。
https://stackoverflow.com/questions/17825703
复制相似问题