3 b+ p' O& i* {" J. r* o, @4 l) D1 i2 w4 `
搜索引擎的工作过程非常复杂,但是对于SEO人员来说,我们只需要了解其核心内容就好了。搜索引擎工作主要是以下几个阶段:4 _! ?1 h1 o& e& s
6 ]$ i# P) n e第一,排名:用户输入关键词后,排名程序调用索引库数据,计算相关性,然后按一定格式生成搜索结果页面。/ z, o e, n" G7 U( J( }
/ d# @1 S4 k4 l第二,预处理:索引程序对抓取来的页面数据进行文字提取、中文分词、索引等处理,以备排名程序调用。
/ w' s, S# n0 x& r1 y4 ]
/ ]. p1 I8 v) v; d q3 W+ g第三,爬行和抓取:搜索引擎蜘蛛通过跟踪链接访问网页,获得页面HTML代码存入数据库。# b5 S$ R( x6 W( @
( e7 a9 ]: D4 B当然搜索引擎的三个阶段的工作都是非常复杂的。在此中国竹纤维十大品牌http://www.zlytex.com/只跟大家分享搜索引擎工作的第一步,爬行和抓取,让大家清楚的了解,网站的数据是怎么到搜索引擎上的。搜索引擎用来爬行和访问页面的程序称为蜘蛛,也成为机器人。
* o4 M$ `, k9 {' u2 c
$ L3 d, v# p: ]4 ^搜索引擎蜘蛛访问网站页面时类似于普通用户使用的浏览器。蜘蛛程序发出页面访问请求后,服务器返回HTML代码,蜘蛛程序把收到的代码存入原始页面数据库。搜索引擎为了提高爬行和抓取速度,都使用多个蜘蛛并发分布爬行。
! T4 Z& Q7 M* U( R9 O, {8 h, F, g) A+ k# h0 p/ V# w
' V5 O! s# [ }( v' S% \, r
4 X0 T0 G$ g6 N# L0 j4 X |