找回密码
 加入怎通
查看: 1865|回复: 4

[站长八卦] 搜索引擎优化:搜索引擎原理,搜索引擎对内容的处理

[复制链接]
奥弗学校 发表于 2020-07-05 19:34:23 | 显示全部楼层 |阅读模式
搜索引擎抓取内容之后会收录至数据库中,当用户进行检索搜索引擎会将收录的内容呈现给用户,为了快速的将内容呈现给用户,搜索引擎需要对已经抓取到的内容进行处理,只留下重点信息,这样能够在用户发起检索的时候快速的将所需内容呈现出来。
! n8 C$ C: Q- P; a8 `* C, p
pVnB6SBsOVp6ZSvn.jpg

7 G3 Y4 P1 ^' L# x# e& f& I  o! |
1 X# h: a0 R# n1 Y1 S' u那么搜索引擎对蜘蛛抓取回来的页面进行处理主要有4个步骤。" K; }$ G% f5 Q$ V- |# O) _2 X. C
第一:判断该页面的页面类型$ P6 R9 W( R# F8 ]3 _; {" U
判断页面是正常的普通网页还是PDF等特殊文件文档。普通网页会区分是论坛、普通文章还是视频等内容,方便后期更快的呈献给用户8 Y& o! F: |# `& v
第二:提取网页的文本信息
! I6 s. O7 k/ B. r# b站长们都知道搜索引擎无法识别JavaScript、Flash、图片、视频等内容,虽然一直在努力的识别这些信息,但是更多的还是依靠提取网页TDK来进行识别,虽然keyword标签已经被主流搜索引擎抛弃,但是还是会有一定的参考借鉴的。
% U2 Z$ i2 U: P/ X
DElGrN0gq0f17Qq4.jpg
4 e7 T) r4 Q0 i/ X/ V% {

6 ^3 R3 W  g* b6 V! {第三:去除页面噪音0 U" F+ r- D; r- V
前面有两三篇文章,提到页面信噪比的问题,信噪比就是页面主题内容与干扰信息的比例,搜索引擎会去掉与该页面无关的广告、导航、链接等各类信息,提取网页的主体内容。 相关搜搜的在一定程度上也会被算作本页的内容,所以更好的利用想过搜索不但可以提高页面质量,还可以增加与用户搜索的匹配程度。2 M1 l# c* ]" W$ M
OzvwQ571d1z1W457.jpg
: Q1 B0 u: ?0 ^4 g1 ^! O
7 T; U1 K# B: _7 j. _- J
2 b# R$ ~  i; V" N1 k9 [
第四:去除页面内容停止词5 c8 f  d8 l1 I
去除页面停止词其实是搜索引擎分词处理,今天主要讲停止词,也就是页面中“的”“啊”等词语,来减少搜索引擎的计算量。

暂时无法加载帖子列表

回复

使用道具 举报

互易中国1003 发表于 2026-03-13 20:26:12 | 显示全部楼层
说得很实在,没有夸大其词,这种真实分享太难得了
回复

使用道具 举报

2450454516 发表于 2026-07-31 20:22:29 | 显示全部楼层
楼主辛苦了,整理这么多内容,必须点赞收藏
回复

使用道具 举报

加菲猫 发表于 2026-09-04 21:19:58 | 显示全部楼层
这个分享太实用了,刚好能用到,感谢楼主!
回复

使用道具 举报

~~@@~~ 发表于 2026-09-08 18:49:09 | 显示全部楼层
刚好遇到类似问题,看完这个帖子心里有底了
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 加入怎通

    本版积分规则

    QQ|手机版|小黑屋|网站地图|真牛社区 ( 苏ICP备2023040716号-2 )

    GMT+8, 2026-9-10 20:26 , Processed in 0.042778 second(s), 32 queries , Gzip On.

    免责声明:本站信息来自互联网,本站不对其内容真实性负责,如有侵权等情况请联系420897364#qq.com(把#换成@)删除。

    Powered by Discuz! X3.5

    快速回复 返回顶部 返回列表