网站抓取量怎么提升& I1 o# M9 m' T. P* B
( U9 G9 a5 q$ T6 ^! g, o! N
网站抓取量是影响网站收录的重要因素,因此把控好网站的抓取量很重要,那么怎么来提升网站的抓取量呢?
5 s \: [" e5 b3 b5 W" O7 Z网站抓取量=网站的总抓取时间/网站单个页面的抓取时间4 s* B5 ?. u# D$ ]
那么自然我们可以从二个维度来提升网站的抓取量:) f. E0 i" }8 `" \, N- h
. u% g l% u8 j3 w7 R( c
" y" a; R6 z3 b' L一、降低网站单个页面的抓取时间6 u+ x* u$ z0 z' ]& o% g! _$ s
对于网站单个页面的抓取时间,主要是提高网站的性能,主要包括服务器空间以及网站代码,JS、图片压缩、视频等优化,促使网站会有很快的打开速度,使得搜索引擎程序抓取下载单页面
) a, C" {, d0 S+ F! \" l/ @; d5 K' F9 _& G8 Q
时间变短,从而访问更多的页面,增加抓取量。; ^# y6 {- P6 ~4 S+ b, l
8 \' u5 J8 P* g. w1 V二、增加网站的总抓取时间& E7 k! G4 V1 x* a
网站的总抓取时间又可以细分,可以分为搜索程序的主动抓取以及被动抓取! M) Z9 m$ |8 }, C& s
& F% F. L8 `- ?7 z$ Z
对于主动抓取,就是蜘蛛沿着站内的某个链接不断爬去,那么怎么来控制主动抓取时间呢?
# U# S3 W, O$ U3 K) ~3 m1 D( A$ ~5 o5 S2 G! o
首先许多链接要可抓取,不要让蜘蛛程序无法识别或者无权限,比如JS跳转什么的,注册才能访问之类,然后就是网站的物理层级以及逻辑层级要简短,物理层级我们可以把一些重要的页面2 c) J* d8 T H
2 e3 I* A% f+ Y1 j6 ?+ }" k2 r放在首页,缩短物理距离;逻辑层级方面网站的层级关系要简洁,比如常见的树状结构,首页-栏目页-内容页;最后就是内链的设置,把网站相关的内容尽量的串联成网状,使得蜘蛛程序可
( h, {0 a1 a) b+ p- O& u" l3 ^9 V& j7 o* T+ k* H3 ^
以方便爬取。9 U! G; W% a1 }% j/ ~9 y
0 z1 t) m8 C2 ~9 k+ W# s
至于被动抓取嘛,更多是从站外链接的角度去理解的。. c. m1 E: b0 a9 [
* i6 U/ T2 Y" e) B7 i# o
我们可以在站外建立外部链接来吸引蜘蛛来到我们网站,增加网站的抓取频次以及抓取时间,不过对于外链不要随便的去做,尽量去分享价值,就像百度的工程师LEE说的,有推荐价值的外链% \7 j ?! s' p9 t) l9 Q
& {/ G, M4 a" [: ~; e! w. o& a才是有用的,要不然只是起到吸引蜘蛛作用,我们外链的效用就大打折扣了,说的有点跑题了,当然对于有些人来说聊胜于无嘛。
5 O' N* f) [, f0 B( V* Y" I3 b- D) J
, k( s, K$ `9 p! {还有一点要引起大家的注意,就是要允许蜘蛛程序的爬取,这里就涉及到了robots文件的设置,其次不少网站会有反采集系统,有的服务器的防火墙,还有日志的HTTP状态码,这些都会影响5 t) q" x* {6 S% L' u4 O! ?
S0 P5 P. e& g: T& L! e
到蜘蛛对于网页的抓取,从而影响收录以及流量。5 F( e; [1 u1 H# C0 F, C( i& \7 m. o
0 i. e3 s3 [1 [5 A: V3 s从上面的算式大家其实也基本可以看出大概的方式了,网站抓取量怎么提升?无非是减小分母增大分子,无痕在这里只是简单的陈述下自己的一些见解吧,更多的知识大家可以去看看国平前
8 Q- `- M- i2 S2 w* y
0 a8 N3 {* Q- f( U辈相关的分享,谢谢。+ ]' t4 W9 ?5 X$ K
1 o6 X4 K1 A y) R/ L
网站抓取量怎么提升 笔趣阁 www .ebiquge.com整理
: b/ x* W: P2 o) Q4 @# `& b0 _* q& A$ I7 Y5 Y1 u+ E
& \& d ]" q" a: ~ S/ h
|