是否需要将301重定向添加到robots.txt文件?
我将将重定向添加到.htaccess文件,但不确定搜索引擎是否也需要它们在robots.txt文件中,以防止对排名产生任何负面影响。
发布于 2018-02-14 16:09:12
要回答您的问题:不,robots.txt文件中没有任何重定向规则。只是因为那是他们不适合的地方。我强烈建议阅读robots.txt 这里和那里的标准规范。
Robots.txt是为机器人,爬虫,蜘蛛,自动来阅读和保存您的网页内容。有一种叫做cloacking的方法,几年前被一些非白种人使用过。这种方法是关于服务器配置中的特殊设置(如您的htaccess),以便通过用户代理识别搜索引擎机器人并将它们重定向到特定位置。根据这一点,人类游客也被转移到另一个特殊的地点。
这种方法的目标是:搜索引擎获得页面,这是SEO优化在这样的等级,他们不再舒适地被人类使用。人类访问者得到的不是那么优化的页面,然而,这些页面可以随手使用。
到目前为止,谷歌已经能够很好地识别和惩罚这种行为
https://webmasters.stackexchange.com/questions/112759
复制相似问题