找回密码
 加入怎通
查看: 402|回复: 5

[其他] 百度蜘蛛抓取网页的一些分析

[复制链接]
混沌 发表于 2013-11-04 14:46:04 | 显示全部楼层 |阅读模式
"第一,要想排名靠前,目标关键词应该完整匹配地出现在页面中。比如说,你想让你的网站在用户搜索”电脑学习”时出现在前面,那么在你的网页上,”电脑学习”这四个字应该完整连续的出现,而不能”电脑”出现在第一段,”学习”出现在第二段。
' I# e" e) V4 z& F4 l- S" [: ?; V2 W
: V8 R1 l% \, f  f0 j

& t6 F7 J! `" y5 z# }
. T5 t0 }# R  s# @8 m) \
      第二,我注意了一下蜘蛛似乎更注重页面内的因素。与Google更加重视内部,有点爬虫类的味道,越黑越深,它越是喜欢往里钻,--不相信你做100个页面,做得再漂亮,只要链接没有层次,哈哈,不好意思,你最多就孤零零的被收录可怜的一点点东西。我前两个站开通不到一个月,也很少有外部链接。但因为本身的结构是比较有层次,一些竞争不太激烈的关键词在百度的排名还不错。' `7 g3 w* F7 X3 X2 F1 {; ]; A

0 \% j/ `, B/ O/ i# Y( r

( D  j" k3 J3 Z. r) s
1 k- @5 d- d2 q+ C( c5 q

; E& u0 L. L5 q! m7 _0 ~$ A" x- y      第三:百度蜘蛛极为活跃,经常看看你的服务器日志,你就怀发现百度蜘蛛抓取的频率和数量都非常大。百度蜘蛛几乎每天都会访问我的论坛,并且至少抓取几十个网页。我的论坛只开通了不到一个月,网页数目还没有完善,但是百度蜘蛛的活动已经相当可观了。大量捕获是百度的强项,其他任何搜索引擎都没办法相比。但是百度中文网页数目并不是最大的,百度蜘蛛抓取的频率和网页更新情况有关。! ~. j9 b7 n2 E% i" C
* Z& c, \# G- T2 r. O* {
$ J% v+ G0 x6 p$ R  ~, x4 J% K
. C' @3 @! D& q  A, N0 U2 A) \# k1 W
" v; Z. u/ U. r: p+ `
      第四:充分利用百度的一个最大的优势--大家可能觉得它的优势对我们来说就是难事了嘛:呵呵,的确是可以利用的,百度收录速度可以用海量来形容,正因为速度快,就给我们留下了可以利用的空间!* u$ U+ t/ Z) Q

6 ~) r6 @( a  o
1 w: j2 g3 W1 x) |6 j/ l0 m
4 d& }: C/ x9 B7 E1 \# t- S' K
/ m; P/ W7 |# Y* o6 B0 q
      第五:百度并不被所谓的优化迷惑!!GG对优化好象www.ljbylc357.com远远没有百度敏感,百度尤其反感所谓的优化,不知道是用什么方法识别----我的看法是目前最”先进“ 的优化方法,好象对百度没什么大的作用,大家都这么干了,机器人是有点死脑筋,但是百度那些IT也不是吃白饭的哈,要知道他是全球最先进的中文搜索老大,,GG在中文搜索这快--哈哈,不用说了吧:)
" O+ l1 ?. ]0 H8 e1 d$ i; R0 ?; O0 G( h9 |# ~+ O$ c, P. h

7 n1 ]: }# W5 v" j      第六:百度排名算法是以网页为基础,比较少关注整个网站的主题。联系到上一点,这说明百度排名算法中比较注重内部结构缺少完整的语义分析。所以一些目前比较认同的关于site:之间那几个所谓关系到搜索质量的东西,并不是百度蜘蛛所最敏感的。"
9 |. W- B; Q2 K# C- u1 p3 V1 s& Z2 P& U
9 |! r9 u. S9 j& V9 G6 a

暂时无法加载帖子列表

回复

使用道具 举报

谁的世界 发表于 2026-03-17 07:58:54 | 显示全部楼层
这个分享太实用了,刚好能用到,感谢楼主!
回复

使用道具 举报

上海底特 发表于 2026-07-30 11:29:44 | 显示全部楼层
这个思路很新颖,打开了新世界的大门,谢谢分享
回复

使用道具 举报

四面楚歌 发表于 2026-08-06 20:38:59 | 显示全部楼层
内容很干货,没有多余的废话,值得反复看
回复

使用道具 举报

Benmio 发表于 2026-08-08 20:10:24 | 显示全部楼层
楼主太厉害了,整理得这么详细,必须支持
回复

使用道具 举报

03108124888 发表于 2026-08-18 23:06:03 | 显示全部楼层
楼主辛苦了,整理这么多内容,必须点赞收藏
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 加入怎通

    本版积分规则

    QQ|手机版|小黑屋|网站地图|真牛社区 ( 苏ICP备2023040716号-2 )

    GMT+8, 2026-9-14 23:39 , Processed in 0.041608 second(s), 30 queries , Gzip On.

    免责声明:本站信息来自互联网,本站不对其内容真实性负责,如有侵权等情况请联系420897364#qq.com(把#换成@)删除。

    Powered by Discuz! X3.5

    快速回复 返回顶部 返回列表