机器人和站点地图

Question

我在索引方面有一些问题。谷歌在榜单上做了很多索引。现在我想从我的网站上删除所有的东西。

如果我不允许所有的人在robots.txt和发送我的sitemap.xml。谷歌还会为我的链接建立索引吗？我打算从sitemap.xml中索引我的链接

我的网站地图应该涵盖我的网站诞生的整个时期吗？例如，我有这个网站，是1岁。从第一天起，我应该把这篇文章写在网站地图上吗？

Answer 1

谷歌在榜单上做了很多索引。现在我想从我的网站上删除所有的东西。

请记住，谷歌需要一段时间才能删除、重新编制索引，并更新网站的索引链接。因此，耐心是一个主要的要求，因为你去这个过程。

如果我不允许所有的人在robots.txt和发送我的sitemap.xml。谷歌还会为我的链接建立索引吗？

答案是否定的。索引将停止，因为您不允许所有机器人进一步索引信息。

我的网站地图应该涵盖我的网站诞生的整个时期吗？例如，我有这个网站，是1岁。从第一天起，我应该把这篇文章写在网站地图上吗？

如果链接仍然在那里与网页，实际上是在网站上，保留这些。如果有些网页不再存在，或者已经移动到一个新的URL，我强烈建议将站点地图更新到您网站的当前结构。

另外，对于我的网站，我希望我所有的网页都被索引，所以这将是从第一天我创建网站的生活。