避免网站重复收录的经典技巧

站长们在网络推广或者网站优化时经常会遇到一个页面被重复收录了几次的问题，不利于网络推广、网站优化和提升网站权重排名，而且严重了还会影响到网站的质量。所以大家不要想成重复越多越好，这样可以增加收录量，应该学会避免网页重复收录的问题。
* b, _$ C  }/ L* b; Q/ H
　　一、利用ROBOT屏蔽其他网址一般来说每个网站都会带有两个网址，特别是一些要生成静态的网站，本身就存在一个动态的，自然生成静态后就会多出一个网址，这样当这篇文章收录时，两个网址也同时被收录了，因为搜索引擎把其中同一篇文章的两个网址看作是独立的，自然就两个都被收录了。其实很多时候，在SEO网络推广时站长们都希望自己的网站收录多，但是同样的文章重复几次的收录，对于网站优化确实存在一种增加收录的现象，但是过不了多久，同类的就会删除掉，毕竟一样的内容存在搜索引擎数据库中只会占用空间。
9 F( G, F( K( i1 I* Y4 g
　　二、利用网站地图引导蜘蛛蜘蛛爬行是首先爬行ROBOT文件，然后接着就是网站地图，再者是首页。那么通过给网站设置地图不但可以减小网站重复收录的现象，而且还让蜘蛛爬行更加的顺畅。很多站长对于网站地图不在意，其实网站地图网络推广起到的效果就像大厦的平面图，让蜘蛛一看就知道网站的全部内容，自然抓取起来就方便多了，而且拥有一个完整的网站地图，并且每次更新后生成一次地图，对于网站本身就拥有一定的帮助。而通过网络推广有了地图可以有效的减少重复收录的情况。所以，网站地图的作用不单单是把整站的内容进行归纳，而且还可以让蜘蛛爬行更加的顺畅无阻。减少页面重复收录那是一把好手。

5 p& e: l2 b) h/ r3 z( S　　三、及时的清除缓存缓存主要是因为空间的设置不当或者是空间的性能不咋样，因为性能好的空间不会存在缓存，而且因为存取的速度快，自然就不会存在缓存一说了。很多的空间都会带有这样那样的缓存机制，对于一个秒收的网站来说，缓存不及时清除只会让搜索引擎把同样的一篇文章收录多次，因为网络推广一开始你添加完成后自然就会在空间上留下编辑的缓存，而当你全部更新完后，再生成静态或者伪静态的，又会出现一次缓存，这样一来就会出现三个网址了。所以，网络推广时对于这样的缓存不及时清楚，那么当蜘蛛爬行的时候，会连同这些一并抓取，自然就产生重复收录多次了。所以，及时的清除缓存对于解决页面重复收录是有帮助的
! i4 W7 t  }; b/ y" Z( S& I
           （本文来源：www.366msc.com）

支持一下~~~那不收录的问题咋解决呢~

学习了，支持楼主
9 G; }8 E! z+ Y* G2 B3 Q* x0 Q

这个思路很新颖，打开了新世界的大门，谢谢分享

完全赞同，我也是这么认为的，英雄所见略同～

说得很实在，没有夸大其词，这种真实分享太难得了

内容很干货，没有多余的废话，值得反复看

学习到了，之前一直没注意过这个点，受教了

楼主太厉害了，整理得这么详细，必须支持

这个分享太实用了，刚好能用到，感谢楼主！

刚好遇到类似问题，看完这个帖子心里有底了

楼主辛苦了，整理这么多内容，必须点赞收藏

蹲了这么久，终于看到有价值的讨论，支持一下！