不利于蜘蛛七个网站设置

有些网站视觉效果设计的不错，但对搜索引擎来说却不太友好，影响了蜘蛛的爬行及抓取，无法提升网站排名。灵龙收集总结了以下7点较为常见的不利于蜘蛛的设置。
　　1.Flash：
$ F; {  S. k6 t　　在页面的较小区域使用Flash增强页面效果是很正常的，例如Flash广告、图标等。类似于这样的小Flash作用和图片差不多，只是比图片更生动一些。Flash的比例只占用HTML编码的一小部分，页面还有文字作为主要内容的页面，对搜索引擎来说不会受到影响。
6 E! \; i4 O7 C) C# f' u　　但有的页面，完全就是一个大大Flash，如果这样做，看了黑道小说会导致蜘蛛无法抓取任何内容。还有的网站习惯一打开首页先出现一个Flash片头，等看完片头再被转向到正常的HTML页面。蜘蛛无法读取Flash，也无法分辨Flash中的跳转。所以这类Flash最好不要出现。
　　2.Session ID：
- H# I% n4 f. `1 K+ ~( T( n　　有些网站、论坛使用Session ID(会话ID)跟踪用户访问，每一个用户打开网站，都会生成一个独特唯一的Session ID，加在URL中。这样会产生一个问题，就是每一次蜘蛛来到你的网站，都会获得一个新的URL，但内容完全一样，对于搜索引擎来说，多个URL指向同一内容页面、或多个URL页面雷同，造成K站。
　　通常建议跟踪用户访问，使用Cookies而不要生成Session ID。或者程序判断访问者是搜索引擎还是普通用户，如果是蜘蛛，则去掉Session ID，对于蜘蛛来说Session ID是没有什么意义的，蜘蛛不会填表，也不会把商品放入购物车。
) b$ c2 O) V, y' g( _　　3.各种跳转：
7 Z8 D4 I  ]! O" u" _0 ?　　建站用到的所有跳转，其中除301跳转以外，其他所有跳转方式搜索引擎一律不支持，一些heimaoSEO**摄影经常使用跳转欺骗用户和蜘蛛，所以除非万不得已，否则尽量不要用跳转。
* u; C# ^0 L, k* i　　4.框架结构：
　　如果你不知道什么是框架结构(iframe)，那么你已经避免了一种不利于搜索引擎的一种设置。如果存在这类框架结构，尽量不要再使用了，引擎蜘蛛对于框架结构的看法就如同Flash一样。
/ d/ t( K8 L  Z　　5.动态URL：
　　所谓的动态URL指的是数据库驱动的网站所生成的、言情带有问号、等号、或存在一些参数的URL。对于此类应避免，尽量减少在蜘蛛眼中出现不同URL指向相同页面和雷同页面。
　　6.JavaScript链接：
  W/ M: V* Q3 e# r) {　　由于JavaScript可以产生很多吸引眼球的特效，有些网站喜欢用JavaScript脚本生成导航，但这样蜘蛛也是无法识别的。所以避免使用JavaScript，减少一定的麻烦。
+ s* V- [0 u% x3 X. t　　7.要求登录才能访问：
　　一些论坛较为常见，需要登录后，美女有一定的权限才可以访问相应版块，但这部分板块蜘蛛是无法抓取的。蜘蛛不能填写用户名、密码、也不会注册。
　　以上总结了几种较为常见的不利于蜘蛛的设置，在建站时应极力避免。

内容很干货，没有多余的废话，值得反复看

刚好遇到类似问题，看完这个帖子心里有底了

楼主辛苦了，整理这么多内容，必须点赞收藏

这个分享太实用了，刚好能用到，感谢楼主！