云客网简单介绍搜索引擎是如何抓取页面的

q365679085 · 发表于 2015-11-23 10:29:05

　　搜索引擎对网页的收录是一个复杂的过程，简单来说，收录过程可以分为：抓取、过滤、建立索引和输出结果。下面云客网小编和大家简单说一下这几个步骤，让你可以清楚你的网页从你发布之后是如何被搜索引擎收录并获得相关排名的。
　　1、抓取
　　网站的页面有没有被搜索引擎收录，首先要看一下网站的蜘蛛访问日志，看一下蜘蛛有没有来，如果蜘蛛都没有抓取，那是不可能被收录的。蜘蛛访问网站的日志可以从网站的IIS日志里面看到，如果搜索引擎蜘蛛没有来呢?那么就主动向搜索引擎提交，搜索引擎会派出蜘蛛来抓取网站，这样网站才有可能被尽快收录。
　　2、过滤
　　网站的页面被抓取了并不代表一定会被收录。蜘蛛来抓取了之后，会把数据带回去，放到临时的数据库中，再进行过滤，过滤掉一些垃圾的内容或者是低质量的内容。
　　你页面的信息如果是采集，在互联网上有大量的相同信息，搜索引擎就很有可能不为你的网页建立索引。有时候我们自己写的文章也不会被收录，因为原创的不一定就是高质量的。关于文章质量的高低，云客网小编会在以后的文章中单独拿出一篇来和大家详细讨论。
　　过滤这一过程就是一个去掉糟粕的过程，如果你的网站的页面顺利通过了过滤这一过程，说明页面的内容达到了搜索引擎设定的标准，页面会就会进入建立索引和输出结果这一步。
　　3、建立索引与输出结果
　　这里，我们把建立索引和输出结果合在一起进行说明。
　　通过一系列的过程之后，符合收录的页面之后会建立索引，建立索引之后就是输出结果，也就是我们在搜索关键词后，搜索引擎展示给我们的结果。
　　当用户在搜索关键词时搜索引擎就会输出结果，输出的结果是有顺序排列的。这些结果排序是根据一系列复杂的算法来排定的。比如：页面的外链，页面与关键词的匹配度，页面的多媒体属性等。
　　在输出的结果中，还有一些结果是通过抓取之后直接可以输出的，没有经过中间复杂的过滤和建立索引等过程。什么样的内容和什么样的情况下才会发生的呢?那就是具有很强的时效性的内容，比如新闻类的。比如今天发生了一件特大事件，各大门户和新闻源快速发出了关于事件的新闻，搜索引擎会迅速对重大新闻事件作出反应，快速收录相关的内容。
　　更多资讯请关注云客网

ssll2008 · 发表于 2015-11-23 10:29:20

沙发怎么能少了我？！

发财树 · 发表于 2026-03-14 05:13:34

分析得很透彻，很多细节都说到点子上了～

		自动登录	找回密码
密码			加入怎通

[关于百度] 云客网简单介绍搜索引擎是如何抓取页面的

浏览过的版块