搜索引擎为用户展现的每一条搜索结果,都对应着互联网上的一个页面。每一条搜索结果从产生到被搜索引擎展现给用户,都需要经过四个过程:抓取、过滤、建立索引和输出结果。- l$ j3 g9 }9 |8 l( M
; H0 R3 y5 D3 Y3 T+ c9 E$ h) P 抓取- S; l3 T, B: ^; b, w4 I
7 n9 v3 ~2 `$ y+ A2 x: S* J
baiduspider,或称百度蜘蛛,会通过搜索引擎系统的计算,来决定对哪些网站施行抓取,以及抓取的内容和频率值。搜索引擎的计算过程会参考您的网站在历史中的表现,比如内容是否足够优质,是否存在对用户不友好的设置,是否存在过度的搜索引擎优化行为等等。 M" l. C% F3 y. x6 I
5 h" O) j8 v% b: l. }" ~+ ~% l 当您的网站产生新内容时,baiduspider会通过互联网中某个指向该页面的链接进行访问和抓取,如果您没有设置任何外部链接指向网站中的新增内容,则 baiduspider是无法对其进行抓取的。对于已被抓取过的内容,搜索引擎会对抓取的页面进行记录,并依据这些页面对用户的重要程度安排不同频次的抓取更新工作。
3 R7 n3 \$ g1 S9 g
. D, {* e- @& | 需您要注意的是,有一些抓取软件,为了各种目的,会伪装成baiduspider对您的网站进行抓取,这可能是不受控制的抓取行为,严重时会影响到网站的正常运作。点此识别baiduspider的真伪。
9 w% z+ n- l+ J ?; E
2 P" l# r2 B' F 过滤
" s. w1 x# d( Q% @4 f6 f D
0 d6 X% X1 F' f! f) G* ] 互联网中并非所有的网页都对用户有意义,比如一些明显的欺骗用户的网页,死链接,空白内容页面等。这些网页对用户、站长和百度来说,都没有足够的价值,因此百度会自动对这些内容进行过滤,以避免为用户和您的网站带来不必要的麻烦。8 _$ A* Q' {1 ^" T6 Q
- n( E# D& X3 y/ {
建立索引
! X6 t% l5 O5 N& `3 _6 r% s6 L+ i4 T5 U$ b8 \& `6 F
百度对抓取回来的内容会逐一进行标记和识别,并将这些标记进行储存为结构化的数据,比如网页的tagtitle、metadescripiton、网页外链及描述、抓取记录。同时,也会将网页中的关键词信息进行识别和储存,以便与用户搜索的内容进行匹配。
: g- V, a, Y3 D5 y! F4 S' A" J) d: q4 P- D
输出结果; g& n# r4 b% _# R) ^" X. C% S
1 q* e, a1 o* Y0 A; k3 M& Q) g
用户输入的关键词,百度会对其进行一系列复杂的分析,并根据分析的结论在索引库中寻找与之最为匹配的一系列网页,按照用户输入的关键词所体现的需求强弱和网页的优劣进行打分,并按照最终的分数进行排列,展现给用户。/ u* h$ _1 H/ h6 k1 o
$ T1 y9 q$ x$ ^6 x 综上,您若希望通过搜索引擎为用户带来更好的体验,需要对进行您的网站严格的内容建设,使之更符合用户的浏览需求。需要您注意的是,网站的内容建设始终需要考虑的一个问题是,这对用户是否有价值。内容来自百度站长平台资料区& u% K l! @ C! e
本文由 changchun.16tone.net 长春租车 提供 转载请注明% E) @4 F q; H
/ [! j! @- ?) y8 P |