前言

有时候我们有些隐私或者一些备份重复的内容不想被搜索引擎搜到,所以就需要做些屏蔽功能了,怎么弄呢?

方法

1.还是利用robots.txt文件,内容如下(不允许网站根下所有内容)

User-agent: *
Disallow: /

2.在网页代码里添加 meta 标签来实现

拦截所有搜索引擎收录和索引网页

<meta name="robots" content="noindex,nofollow">

只拦截百度蜘蛛,而允许其他搜索引擎索引收录

<meta name="baiduspider" content="noindex,nofollow">

允许搜索引擎收录索引网页,但禁止继续追踪页面链接

<meta name="robots" content="nofollow">

允许搜索引擎收录索引网页,但禁止收录网页上的图片

<meta name="robots" content="noimageindex">

可以根据需要将上面的代码加入到自己的网页 head 头部中。如果你的页面先前被收录了,那么下次搜索引擎再来的时候会给你移除。