找回密码
 加入怎通
查看: 718|回复: 10

[站长八卦] 影响蜘蛛爬行的因素

[复制链接]
新工作 发表于 2012-11-01 19:12:43 | 显示全部楼层 |阅读模式
1、网站的整体结构。
% F8 a/ z) N0 ^2 W$ s包括:title中是否嵌入关键词、网站标题、meta中的关键字、描述标签、导航栏等。参考文章:如何构建良好的网站结构
/ z+ j6 u5 v4 Z/ L: W
6 `4 O0 c, [% C, [3 }2、 建设网站地图。
8 v  k4 {; c% Y0 v% U  t网站地图就好比是一个指向标,唯有清晰明了的指向标才能指引蜘蛛的去向。方便快捷的道路也会勾引来更多的蜘蛛。7 d, m6 m) E0 L, p4 n: F
1 n+ S/ J, W! ]" q, p
3、网站的原创内容。8 ]/ _0 Y2 c1 @7 G
原创的内容对于百度蜘蛛的吸引力是非常巨大的,原创的内容就好象是主食,蜘蛛是每天都需要的。参考文章:如何写出高质量的原创文章
5 f2 |- V/ U' Z& ~4 W2 w
2 ^2 S' \( {# X4 i% d, @& g3 y4、网站的外部链接。
/ I- Z5 G2 m3 v# R! |7 K& Q要被蜘蛛抓取,就必须有导入链接进入页面,否则蜘蛛根本没有机会知道页面的存在。参考文章:高质量外部链接的标准是什么?) W" C& J3 p- G3 C  p- Y

. H+ }5 a  ^' ?- w- r. i* R5、内部链接优化。4 E. M5 b. q$ i7 h0 `6 K
蜘蛛来到你的网站之后,自然会通过你的网站结构,遍历你的网站,几乎能够跑遍你网站上的所有链接,这些链接一旦出现死链接,就很容易造成蜘蛛爬不出来,次数多了,百度自然会对你网站没有好印象。
" b5 c: i) T) c3 f& i" f, f  V: \! N5 v
6、网站的更新频率。0 X( d$ z$ H. M1 V
蜘蛛每次爬行都会把页面数据存储起来。如果 第二次爬行发现页面与第一次收录的完全一样,说明页面没有更新,蜘蛛也就没有必要经常抓取了。页面内容经常更新,蜘蛛就会更加频繁的访问页面,页面上出现的新链接,自然会被蜘蛛更快地跟踪、抓取。参考文章:为什么说网站内容更新非常重要?% I3 W5 f) h1 ]5 N7 s  u  Y# N

/ P/ P. v0 l  e7、监测蜘蛛的爬行。2 T6 A& T; q6 y
可以利用网站日志知道蜘蛛正在抓取哪些页面,还可以利用站长工具对蜘蛛的爬行速度进行查看,合理分配资源,以达到更高的抓取速度和勾引更多的蜘蛛。2 z' n: |% Q6 U# [$ V# _& H

暂时无法加载帖子列表

回复

使用道具 举报

夕阳 发表于 2012-11-01 21:26:48 | 显示全部楼层
讲的不错 学习了         
回复

使用道具 举报

熬夜赚钱 发表于 2012-11-01 21:52:21 | 显示全部楼层
内链很重要,是给蜘蛛引路!
回复

使用道具 举报

龙行天下 发表于 2012-11-01 21:55:49 | 显示全部楼层
不错的东西。学习了
回复

使用道具 举报

美泰-杨昆 发表于 2012-11-02 13:32:33 | 显示全部楼层
想知道有没有方法可以看到蜘蛛的路径。就是爬过的痕迹。
回复

使用道具 举报

ELVA 发表于 2012-11-02 13:41:28 | 显示全部楼层
写的非常不错!顶一个!/ c# K6 b& |: z7 Z9 e. v
回复

使用道具 举报

西万路小混混 发表于 2026-08-08 08:41:15 | 显示全部楼层
内容很干货,没有多余的废话,值得反复看
回复

使用道具 举报

西万路小混混 发表于 2026-08-08 19:14:39 | 显示全部楼层
楼主太厉害了,整理得这么详细,必须支持
回复

使用道具 举报

小小生意 发表于 2026-08-09 21:13:41 | 显示全部楼层
这个思路很新颖,打开了新世界的大门,谢谢分享
回复

使用道具 举报

gordonla 发表于 2026-08-11 07:57:14 | 显示全部楼层
蹲了这么久,终于看到有价值的讨论,支持一下!
回复

使用道具 举报

匿名用户2 发表于 2026-08-19 16:41:54 | 显示全部楼层
学习到了,之前一直没注意过这个点,受教了
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 加入怎通

    本版积分规则

    QQ|手机版|小黑屋|网站地图|真牛社区 ( 苏ICP备2023040716号-2 )

    GMT+8, 2026-9-14 22:28 , Processed in 0.183399 second(s), 25 queries , Gzip On.

    免责声明:本站信息来自互联网,本站不对其内容真实性负责,如有侵权等情况请联系420897364#qq.com(把#换成@)删除。

    Powered by Discuz! X3.5

    快速回复 返回顶部 返回列表