智客SEO入门扫盲篇：SEO的常用术语

robots的作用有三点1.

1、屏蔽网站内的死链接

2.屏蔽搜索引擎蜘蛛抓取站点内重复内容和页面

3.阻止搜索引擎索引网站隐私性的内容

那这个文档关乎我们做SEO地方是什么呢，给大家再举个栗子哈，就是说在我们的网站被收录后，我们的网站比如有一百个网页，但是只有其中的100个页面是想让别人看到，我们需要合理利用蜘蛛的资源，如果收录下来的很多页面跟我们想推广的内容毫不相关，这样做是浪费资源的，说严重的如果没有这个文档的话，那我们的后台页面等不方便公开的网页也会被别人抓取到。

视频解说：http://www.seo93.com/zkseo/zk2/1.mp4