我应该用无索引来标记坏的内容吗？

Question

我有一个网站与大量使用生成的内容。用户可以下载和更新其他用户的内容。收视率可能是负面的。或多或少的SE风格。

我应该添加避免索引错误的内容吗？(教资会评级为负数)

Answer 1

以下是我不会索引的页面类型。

1. 没有答案的网页。
2. 有重复问题的页面。

我不认为，你不应该索引所有的负面帖子，可能有人不喜欢这个问题，并点击负面排名，但这并不意味着页面包含坏/低质量的内容。你应该读这个PDF来自谷歌.，你会得到很多提示，关于好的内容。

Answer 2

绝对是的。你也可以避免爬行不良内容。Google还提供了基于url参数、特定路径(基于robots.txt)的爬行选项。