默认的robots.txt文件禁用搜索引擎索引吗?我不能把它换成我自己的。我错过了什么?
这是默认的和固定的:
User-agent: * Disallow: /
发布于 2019-01-19 06:30:49
根据slack的说法,*.surge.sh子域上的robots.txt文件被锁定,以防止链接农场...悲伤的。
https://stackoverflow.com/questions/54262130
相似问题