我有域www.mydomain.com,并设置了apache mod-rewrite,以便拥有www.mydomain.com/myappl。我应该把文件robots.txt放在哪里?谢谢!
发布于 2009-12-02 18:34:49
客户端必须能够以http://www.mydomain.com/robots.txt身份访问robots.txt。如何做到这一点取决于你的mod-rewrite配置。如果您需要更多帮助,请发布配置。
另请参阅http://en.wikipedia.org/wiki/Robots_exclusion_standard了解详细信息。
发布于 2009-12-02 18:36:23
我不知道;-)但您可以使用robots checker来查看您的文件是否可访问。因此,如果您不知道它将在哪里访问,并对其进行测试。
https://stackoverflow.com/questions/1832030
复制相似问题