首页
学习
活动
专区
圈层
工具
发布
社区首页 >专栏 >限制搜索引擎收录网站的方法

限制搜索引擎收录网站的方法

作者头像
西柚dzh
发布于 2022-06-09 15:54:56
发布于 2022-06-09 15:54:56
1.1K0
举报
文章被收录于专栏:dcmickey小站dcmickey小站

前言

有时候我们有些隐私或者一些备份重复的内容不想被搜索引擎搜到,所以就需要做些屏蔽功能了,怎么弄呢?

方法

1.还是利用robots.txt文件,内容如下(不允许网站根下所有内容)

User-agent: * Disallow: /

2.在网页代码里添加 meta 标签来实现

拦截所有搜索引擎收录和索引网页 <meta name="robots" content="noindex,nofollow"> 只拦截百度蜘蛛,而允许其他搜索引擎索引收录 <meta name="baiduspider" content="noindex,nofollow"> 允许搜索引擎收录索引网页,但禁止继续追踪页面链接 <meta name="robots" content="nofollow"> 允许搜索引擎收录索引网页,但禁止收录网页上的图片 <meta name="robots" content="noimageindex">

可以根据需要将上面的代码加入到自己的网页 head 头部中。如果你的页面先前被收录了,那么下次搜索引擎再来的时候会给你移除。


版权属于:dingzhenhua

本文链接:https://cloud.tencent.com/developer/article/2019168

转载时须注明出处及本声明

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2020-03-18,如有侵权请联系 cloudcommunity@tencent.com 删除
目录
  • 前言
  • 方法
    • 1.还是利用robots.txt文件,内容如下(不允许网站根下所有内容)
    • 2.在网页代码里添加 meta 标签来实现
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档