我正在使用WordPress,出于测试目的,我制作了一个子文件夹作为测试博客,我使用我的主博客数据库进行测试博客,我不鼓励搜索引擎对其进行索引,但过了一段时间后,我用谷歌搜索了我博客的一个主题,我发现已经索引的链接来自测试博客,然后我检查了搜索控制台,有一堆来自这个测试博客的链接生成了404,因为我已经删除了这个子文件夹...那么google会不会用测试博客链接来替换我的博客链接呢?以及如何删除这些404并阻止google对此子文件夹进行索引和爬行。
或者,有没有办法重定向来自以下位置的任何请求:
Www.myblog.com/子文件夹/主题
至
www.myblog.com/topic
发布于 2018-11-26 14:39:16
首先,您需要禁止从Google到索引的路径。
从你的robots.txt文件中添加特定的代码,并添加你想要谷歌禁止的网址的代码。
禁止:/子文件夹/主题
您需要提交robots.txt文件。
过一段时间后,该URL将从Google Crawler中删除,您的404错误也会删除。
https://stackoverflow.com/questions/51300255
复制相似问题