找回密码
 加入怎通
查看: 825|回复: 9

[SEM行业] 对蜘蛛设下“禁止通行”的网站结构

[复制链接]
七夕联盟-凡凡 发表于 2014-03-07 18:01:05 | 显示全部楼层 |阅读模式
       一些网站设计技术对搜索引擎说很不友好,不利于蜘蛛爬行和抓取,这些技术被称为蜘蛛陷阱。常见的蜘蛛陷阱分为以下的几种:8 N( \/ s2 H- @# ]4 c
  
$ P- P) K0 _3 k) K1 k/ L; B  常见一:JavaScript链接
: P- {+ j5 {. d' X2 w  通常一些不懂SEO的企业老板为了美观,在网站上做很多很炫的效果,尤其体现在Banner上,做的非常的漂亮。但其实那些很炫的特效大部分都是用JavaScript做的链接,在蜘蛛爬到首页上时首先遇到的就是这个JavaScript;那就相当于告诉蜘蛛,这条路不通,去找别的路吧。' e. g8 X: A" O9 A" K" k' C, T

- A0 E  P1 I- q8 s  ?+ H" n  常见二:在网页里穿插FLASH/ G; F: N% d+ H* A, u* ?: H  r
  网页FLASH不难理解,像我们从前的QQ空间,刚进去的时候就会看到一个小星星的动画,几秒钟过去后才进入我们的QQ空间;这种做法在视觉上可以起到很大的冲击,但在蜘蛛面前,就是“禁止通行”了;这也是在早先QQ空间从不被百度抓取的原因。
. ^0 T% G1 H0 J+ X0 B+ W  
0 r/ t, Z8 @6 d, k; P  常见三: iframe 框架结构
- J, C. n$ _3 Z8 n+ O+ e  iframe框架架构相当于给框架里面的链接、内容加上了一层保护膜,蜘蛛抓取时遇到iframe结构也只能叹为观止,之前这么框架结构在摸版上很常见,现在不多了;不过我建议新手站长还是最好检查一下自己的网站源代码,有没有iframe的代码。
$ L0 h6 B. m* L; R9 D
* w2 i) j4 _% O9 J- X, T9 Q* V
     不过iframe框架结构也不是一无是处,一些做优化好的SEO通常把iframe结构套在网站希望展示又不希望抓取的地方上;至于为什么不希望蜘蛛抓取,纯粹是为了网站的相关度。
) |8 M" r6 R/ m8 d* ]8 p( _+ F 
- N1 u' O( j  k# l* C* L: W, t  常见四:动态RUL、参数过多RUL! r7 }! X- D  M6 j7 M6 ^$ P
  有些新手SEO经常被忽略掉网站URL优化的方法,就是网站是否静态化,URL是否过于太长。示例: 7clink.com/?9q=%BF%C6%B1%A6& ... 99&is=cate#J_crumbs+ h. ^5 A0 u* v
  此URL中,动态参数过多,不利于搜索引擎蜘蛛抓取
& H; X* w& v! c  Q% p& i. A! N8 U/ [3 ?% x2 J5 O
  常见五:网站需要登陆注册的页面“Ajax”
- }* y- o  s. z- j  需要登陆注册的页面通常是用Ajax技术做的,因为验正码是没刷新一次就变一次,最能表达Ajax技术的就是 百度地图 ;蜘蛛和人一样如果需要访问一些没有权限的页面的话,一样需要登陆进去,但是蜘蛛不会和人一样申请账号来登陆,所以抓取不到没有权限的页面。1 V7 b+ b" r9 L8 r

6 r7 i7 G2 }9 _- B  在我们做SEO的时候尽量避免以上的一些不利于搜索引擎抓取的代码及结构,让搜索引擎更容易的看懂你的网站!
           七夕广告联盟。* O& H! z6 X/ s5 n1 z8 }

暂时无法加载帖子列表

回复

使用道具 举报

阿迪达斯 发表于 2026-01-12 10:10:47 | 显示全部楼层
分析得很透彻,很多细节都说到点子上了~
回复

使用道具 举报

梦想在飞 发表于 2026-03-17 12:33:55 | 显示全部楼层
刚好遇到类似问题,看完这个帖子心里有底了
回复

使用道具 举报

卖链接的人 发表于 2026-09-05 09:16:00 | 显示全部楼层
完全赞同,我也是这么认为的,英雄所见略同~
回复

使用道具 举报

走路的悲伤 发表于 2026-09-17 14:29:28 | 显示全部楼层
这个思路很新颖,打开了新世界的大门,谢谢分享
回复

使用道具 举报

whq小呗 发表于 2026-09-23 08:31:42 | 显示全部楼层
楼主辛苦了,整理这么多内容,必须点赞收藏
回复

使用道具 举报

安贞桥北 发表于 2026-09-27 08:57:16 | 显示全部楼层
学习到了,之前一直没注意过这个点,受教了
回复

使用道具 举报

朵儿 发表于 2026-09-27 20:01:27 | 显示全部楼层
说得很实在,没有夸大其词,这种真实分享太难得了
回复

使用道具 举报

金领SEO网络优化 发表于 2026-09-28 21:30:49 | 显示全部楼层
内容很干货,没有多余的废话,值得反复看
回复

使用道具 举报

厘加米 发表于 2026-10-16 10:19:01 | 显示全部楼层
楼主太厉害了,整理得这么详细,必须支持
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 加入怎通

    本版积分规则

    QQ|手机版|小黑屋|网站地图|真牛社区 ( 苏ICP备2023040716号-2 )

    GMT+8, 2026-11-1 07:38 , Processed in 0.049145 second(s), 30 queries , Gzip On.

    免责声明:本站信息来自互联网,本站不对其内容真实性负责,如有侵权等情况请联系420897364#qq.com(把#换成@)删除。

    Powered by Discuz! X3.5

    快速回复 返回顶部 返回列表