我正在与一个可湿性粉剂3.9安装在一个管理托管计划运行脉冲新闻主题。我没有阻止搜索引擎索引这个网站的检查。
我只安装了Yoast SEO插件作为SEO插件。robots.txt文件可以在YOAST SEO插件的Edit Files下编辑。如果您访问站点http://260.303.myftpupload.com/robots.txt,您可以看到robots.txt是这样生成的:
User-agent: *
Disallow: /在YOAST插件中,它将robots.txt显示为:
User-agent: *
Crawl-delay: 1
Disallow: /wp-content/plugins/
Disallow: /wp-includes/
Disallow: /wp-admin/
Disallow: /wp-admin我可以通过FTP查看文件,并可以验证robots.txt文件是否存在于服务器上,并与Yoast插件中显示的内容相匹配。
WP虚拟文件似乎覆盖了手动创建的robots.txt文件。我已经删除了这个文件,并通过Yoast生成了它。我已经删除了文件,并直接通过FTP上传。无论哪种方式,http://260.303.myftpupload.com/robots.txt都只显示:
User-agent: *
Disallow: /请帮帮我!
发布于 2014-05-15 00:28:16
在我们将WordPress托管从临时URL转移到实时url后,robots.txt正确反映了这一点。我认为谷歌爸爸在他们的服务器上有一个覆盖所有使用临时urls的托管计划的robots.txt函数。
https://stackoverflow.com/questions/23555236
复制相似问题