当前位置 : 超级SEO培训网 / SEO技术

robots和noindex标签有什么区别

金戈铁马SEO培训网   http://www.yueseo.com/   January-26 23:33:21

在禁止蜘蛛抓取和收录网页方面,会用到robots和noindex,robots和noindex究竟有什么区别呢?我这里简单的分享下。


robots和noindex有什么区别
 

1、robots文件是放在网站根目录下面的,不是禁止索引,也就是说,并不一定这张页面不被索引,只是不显示页面的快照而已;robots真正的作用只是禁止抓取页面。

2、noindex是在写页面meta中,告诉搜索引擎,这张页面不要索引,但是可以抓取这张页面。

从上面2点可以看出,其实robots和noindex的作用是相反的,也就是说,你使用其中任何一直,你都不能完全的不让蜘蛛访问你的网站,要想不让蜘蛛抓取和索引你的网站的方法就是:robots屏蔽蜘蛛抓取,用noindex屏蔽蜘蛛索引,两者一起用。

 


本文来自金戈铁马SEO培训网(www.Yueseo.com),转摘请注明出处。

体验版课程下载

学员成果分享