报告来源：企业商情报告网（复制此/到地址栏可见原文）[/0 @9 }* w% M+ j6 C1 W, U' ?
1 J& e5 _ ?/ R1 当您的网站产生新内容时，Baiduspider会通过互联网中某个指向该页面的链接进行访问和抓取，如果您没有设置任何外部链接指向网站中的新增内容，则Baiduspider是无法对其进行抓取的。对于已被抓取过的内容，搜索引擎会对抓取的页面进行记录，并依据这些页面对用户的重要程度安排不同频次的抓取更新工作。
& }5 Y5 k5 F" m) q" a# m* i' |( \* Y8 q7 D" [9 E
" i% y- c' T3 v2 I" [: V) q/ t) `' e
2 h! e* x% T8 d& c. V2 Q% Z0 _2 需您要注意的是，有一些抓取软件，为了各种目的，会伪装成Baiduspider对您的网站进行抓取，这可能是不受控制的抓取行为，严重时会影响到网站的正常运作。点此识别Baiduspider的真伪。 x2 L6 x! ^# _+ e+ w
9 T) Y" m1 q \% g7 J H
( u6 Z9 B* e+ Q8 R# v! r4 z7 o
1 l, G% R( c9 n+ T
3过滤
0 _ V! S: k5 ?+ |; |7 a% ^3 i, A1 \" D% c( u& ~7 G4 b
互联网中并非所有的网页都对用户有意义，比如一些明显的欺骗用户的网页，死链接，空白内容页面等。这些网页对用户、站长和百度来说，都没有足够的价值，因此百度会自动对这些内容进行过滤，以避免为用户和您的网站带来不必要的麻烦。
; {" C9 H$ g, j
5 a& l* y" h+ y2 o* l/ K2 B# K& a( J- v j& @) b' v: y
2 I( j+ p- H) ]1 l4 t" J4 X; Y4建立索引$ F: O5 Z/ p1 j7 [
3 ]3 x- H: }& W3 S6 O
百度对抓取回来的内容会逐一进行标记和识别，并将这些标记进行储存为结构化的数据，比如网页的tagtitle、metadescripiton、网页外链及描述、抓取记录。同时，也会将网页中的关键词信息进行识别和储存，以便与用户搜索的内容进行匹配。# Y% U9 ?4 x" n0 _( y# e
( X" V5 I r5 }/ N# h5 e
6 ^3 I6 O$ r6 ^2 w# O! F
8 }/ ^0 K) m: K6 m. ], l5输出结果
/ P; |1 k- d. [4 f* Q- p; }7 Y
! q7 O3 {5 G% S4 [% t9 d6 J 用户输入的关键词，百度会对其进行一系列复杂的分析，并根据分析的结论在索引库中寻找与之最为匹配的一系列网页，按照用户输入的关键词所体现的需求强弱和网页的优劣进行打分，并按照最终的分数进行排列，展现给用户。
2 m: K3 k, [9 ]. n+ F* I
2 r5 B6 @. b, O原文出处：小型吊车www.jnlxjt.com |
