前言
有时候我们有些隐私或者一些备份重复的内容不想被搜索引擎搜到，所以就需要做些屏蔽功能了，怎么弄呢？
方法
1.还是利用robots.txt文件，内容如下（不允许网站根下所有内容）
User-agent: * Disallow: /
2.在网页代码里添加 meta 标签来实现
拦截所有搜索引擎收录和索引网页 <meta name="robots" content="noindex,nofollow"> 只拦截百度蜘蛛，而允许其他搜索引擎索引收录 <meta name="baiduspider" content="noindex,nofollow"> 允许搜索引擎收录索引网页，但禁止继续追踪页面链接 <meta name="robots" content="nofollow"> 允许搜索引擎收录索引网页，但禁止收录网页上的图片 <meta name="robots" content="noimageindex">
可以根据需要将上面的代码加入到自己的网页 head 头部中。如果你的页面先前被收录了，那么下次搜索引擎再来的时候会给你移除。
版权属于：dingzhenhua
本文链接：https://cloud.tencent.com/developer/article/2019168
转载时须注明出处及本声明
