搜索引擎是否会抓取具有“noindex”元属性的页面?
我之所以问这个问题,是因为我们有一些由分面导航引起的几乎重复的内容,而过滤过的页面已经声明了“noindex”,我想知道这些页面是否还会被检测为复制的呢?
当我们使这些页面唯一的时候,我是否必须在链接中添加一个‘no追随者’属性?
发布于 2016-11-03 18:04:29
是的,谷歌仍然在搜索没有索引标签的网页。
但是,如果您在两个不同的网页上有相同的内容,并且一个URL包含noindex标记,而第二个不包含,那么您不应该担心它,因为在所有重复的内容中,只有一个网页被Google索引。其余的网页是可抓取的,但没有索引的谷歌搜索结果,所以这是很好的。
https://webmasters.stackexchange.com/questions/100826
复制相似问题