找回密码
 加入怎通
查看: 582|回复: 7

[站长八卦] 百度搜索引擎从抓取到输出

[复制链接]
润博--王聪 发表于 2012-06-07 14:42:47 | 显示全部楼层 |阅读模式
搜索引擎为用户展现的每一条搜索结果,都对应着互联网上的一个页面。每一条搜索结果从产生到被搜索引擎展现给用户,都需要经过四个过程:抓取、过滤、建立索引和输出结果。/ z$ A; q8 [; G6 z# I0 H
' y2 E% w# n0 O6 \
  抓取
. t4 n" N, M( t  Z3 H5 W7 A- _3 k6 ~$ e1 i
  baiduspider,或称百度蜘蛛,会通过搜索引擎系统的计算,来决定对哪些网站施行抓取,以及抓取的内容和频率值。搜索引擎的计算过程会参考您的网站在历史中的表现,比如内容是否足够优质,是否存在对用户不友好的设置,是否存在过度的搜索引擎优化行为等等。: j) z; S% K3 Y' |7 l: l0 d7 p( `8 X

( Z, t& M1 m+ l  当您的网站产生新内容时,baiduspider会通过互联网中某个指向该页面的链接进行访问和抓取,如果您没有设置任何外部链接指向网站中的新增内容,则 baiduspider是无法对其进行抓取的。对于已被抓取过的内容,搜索引擎会对抓取的页面进行记录,并依据这些页面对用户的重要程度安排不同频次的抓取更新工作。
* v0 V. e5 B, q% t& D- b; D2 z9 t. t8 H0 o' E* |9 }" ?
  需您要注意的是,有一些抓取软件,为了各种目的,会伪装成baiduspider对您的网站进行抓取,这可能是不受控制的抓取行为,严重时会影响到网站的正常运作。点此识别baiduspider的真伪。
1 R! ]; o. t/ ~+ n1 D3 C" D0 c3 a" j
  过滤
: L& [' Y$ y. G7 a/ K0 L. x9 M' F  F
' K: H. F$ H1 q$ I  G  互联网中并非所有的网页都对用户有意义,比如一些明显的欺骗用户的网页,死链接,空白内容页面等。这些网页对用户、站长和百度来说,都没有足够的价值,因此百度会自动对这些内容进行过滤,以避免为用户和您的网站带来不必要的麻烦。
5 f0 v  K2 o# o) l2 `( z% W( D3 O$ Z: g& L& F9 x- D; x
  建立索引5 N* _4 P. a6 A/ `1 z9 E: B9 |4 a( {
7 J7 l8 y+ k. M& o" X
  百度对抓取回来的内容会逐一进行标记和识别,并将这些标记进行储存为结构化的数据,比如网页的tagtitle、metadescripiton、网页外链及描述、抓取记录。同时,也会将网页中的关键词信息进行识别和储存,以便与用户搜索的内容进行匹配。
1 @, G: ?) F  [' E+ F6 G1 B7 v# i! ], }5 r
  输出结果
' N  Y" G( R! u# J3 B  P8 ], l
; g4 J* ]1 N0 I# r2 M3 D  用户输入的关键词,百度会对其进行一系列复杂的分析,并根据分析的结论在索引库中寻找与之最为匹配的一系列网页,按照用户输入的关键词所体现的需求强弱和网页的优劣进行打分,并按照最终的分数进行排列,展现给用户。1 W* n4 p9 u; `, f# j" g. Z

; e: q5 Y: R! F" R# M/ b  综上,您若希望通过搜索引擎为用户带来更好的体验,需要对进行您的网站严格的内容建设,使之更符合用户的浏览需求。需要您注意的是,网站的内容建设始终需要考虑的一个问题是,这对用户是否有价值。内容来自百度站长平台资料区
+ Z7 o" i$ C* ^$ n' E      本文由   changchun.16tone.net  长春租车 提供 转载请注明
* }/ v+ B7 c% o5 c' A  t8 N( V
% ^  N) @8 b# z  I2 _2 [% [

暂时无法加载帖子列表

回复

使用道具 举报

放小孩的羊 发表于 2026-01-10 19:21:23 | 显示全部楼层
这个分享太实用了,刚好能用到,感谢楼主!
回复

使用道具 举报

世通北京 发表于 2026-01-12 20:21:20 | 显示全部楼层
分析得很透彻,很多细节都说到点子上了~
回复

使用道具 举报

进退南 发表于 2026-01-15 17:41:31 | 显示全部楼层
蹲了这么久,终于看到有价值的讨论,支持一下!
回复

使用道具 举报

bhccn 发表于 2026-08-26 06:33:56 | 显示全部楼层
刚好遇到类似问题,看完这个帖子心里有底了
回复

使用道具 举报

编辑-郑娟 发表于 2026-08-28 21:35:28 | 显示全部楼层
完全赞同,我也是这么认为的,英雄所见略同~
回复

使用道具 举报

1589333208 发表于 2026-09-19 07:06:08 | 显示全部楼层
楼主辛苦了,整理这么多内容,必须点赞收藏
回复

使用道具 举报

qzjh2012 发表于 2026-10-23 16:50:29 | 显示全部楼层
楼主太厉害了,整理得这么详细,必须支持
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 加入怎通

    本版积分规则

    QQ|手机版|小黑屋|网站地图|真牛社区 ( 苏ICP备2023040716号-2 )

    GMT+8, 2026-10-29 14:37 , Processed in 0.043230 second(s), 26 queries , Gzip On.

    免责声明:本站信息来自互联网,本站不对其内容真实性负责,如有侵权等情况请联系420897364#qq.com(把#换成@)删除。

    Powered by Discuz! X3.5

    快速回复 返回顶部 返回列表