如何禁止搜索引擎收录网站内容的几种方法

SEO基础知识 杭州seo 1,169 0评论

如何禁止搜索引擎收录网站内容的几种方法?

在网站上总有那么些页面,例如注册页面、登录页面和联系我们页面,我们不希望搜索引擎的蜘蛛对这类的页面进行爬取和收录,需要使用一些手段去禁止搜索蜘蛛爬取收录。

百度蜘蛛

1、robots.txt方法

tobots文件是搜索引擎和网站之间的一个协议,之前杭州seo也讲过robots.txt的作用和写法。新建一个robots.txt或者把服务器上的robots下载下来。比如网站有一个文件需要屏蔽,那么需要这么写:

Disallow:/文件名/

如果你经常看网站日志,你就会发现其实你使用robots禁止的部分百度还是会爬取,而且有时候百度是不爬取robots,意味着你设置的禁止百度没去看,也不会遵守。当然你可以去百度站长平台去更新robots。

2、使用meta标签

其实标签也可以设置禁止所有搜索引擎抓取网站和显示快照,把如下代码放到head里

< meta name="robots" content="noarchive" >

当然,如果你想禁止某个搜索引擎禁止抓取也是可以的,如果你要禁止百度搜索引擎,那么就这么写:

< meta name="baidspider" content="noarchive" >

谷歌的是这样

< meta name="googlebot" content="noarchive" >

mata的更多指令

noindex:告诉蜘蛛不要索引本页面。
nofollow:告诉蜘蛛不要跟踪本页面上的链接。
nosnippet:告诉蜘蛛怒要在搜索结果中显示说明文字。
noarchive:告诉搜索引擎不要显示快照。
noodp:告诉搜索引擎不要使用开放目录中的标题和说明。

今天就介绍了如何禁止搜索引擎收录网站内容的2种方法,如果还有其他方法的可以联系杭州seo,互相交流下

杭州seo>如何禁止搜索引擎收录网站内容的几种方法,版权所有,转载请写明出处。

喜欢 0 or分享

发表评论

()个小伙伴在吐槽
  1. 随便看看,随便转转!

    米表 2016-08-29 08:37 回复