核心提示:百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。2 W$ `: r: I5 N8 D }) C
首先解决一个问题,怎么知道“百度蜘蛛只爬网站首页不爬内页”?* I: B4 F+ n! ~9 V( e) H
蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。
1 @( r. D/ U9 m7 D' K0 ]) H+ e$ w神马?看不懂IIS日志?
1 u: h9 z( u3 q网上有很多IIS日志分析工具,百度一下。这里推荐使用光年IIS日志分析工具,快速易用。
?5 U( @5 z7 h7 R$ Y& C; P接下来,南唐给你分析下“百度蜘蛛只爬首页不爬内页”这个问题。) z1 S; ^; O# j+ l: n' M- u
“百度蜘蛛只爬网站的首页不爬内页”原因有如下:
7 @7 Q$ K2 `8 j. F. \3 u! ]+ `! U( H1、robots.txt,错误操作,屏蔽了内页。
4 j8 W! o) Y; b6 m0 y2、群发等作弊行为。
f6 k" W* I8 c" }3、服务器的原因。' ^, ^; k) [ ~: q! _) t, J
4、网站首页到内页的链接太少,导航结构混乱,导航不清楚。: O) e: f8 o$ ?* G
5、网站质量太烂,权重极低。
9 {' G9 o6 a p7 z* K1 K. S6、网站维护的时候三天打鱼两天晒网。' l. O$ Z* P( @0 j; {7 X* e
7、网站超级新,新的一塌糊涂。
! {$ [" W+ J& O& V0 O1 Y) v6 q6 m8、网站还在百度的沙盒中,百度蜘蛛爬了,也抓取了,没有放页面快照。( K' V( |/ i7 O8 [
首页能够被百度蜘蛛爬行,说明网站并不是让蜘蛛不屑一顾。
; T/ w5 c/ t. }; z那肯定就是上面7条原因中的某一条或者N条,导致了“百度蜘蛛只爬网站的首页不爬内页”。* ^$ z0 [& q g9 U3 I
探讨到此完毕,最后的最后呢,针对上面“百度蜘蛛只爬网站的首页不爬内页”的8条原因,我们一一击破。
3 C9 Y. U( E3 ?9 z: J# A D, A1-8 依次检查网站,逐一排除,逐一解决。* G5 }8 }0 J: `2 q4 J
8大爆破方案如下:
+ |9 k# }9 v9 d. ^' I破1、robots.txt的问题,浏览器输入,查看下,一目了然。8 x. c, H7 o! s" D6 [
破2、这个情况,作为网站的维护者最清楚。如果有群发的seo作弊手法,造成百度蜘蛛只爬网站的首页不爬内页”很常见。) A5 |( A5 j6 n p; } @3 w
处理方法:
* a9 g( e z( L+ N- ^( T! ^停止群发的一切seo作弊手法。
6 S( n( B: T+ c1 Y. _2 k4 l; [有规律并且持续的更新网站内容,网站内容最好原创,次点也要是高质量的伪原创。! D4 n8 r- n) A! |+ g8 A
适当的做点外链和友情链接,引引蜘蛛。$ \ L8 C- P4 K( v" O# t5 s& J, L! f8 j) W R
这种情况只能淡定的坚持,等。
, p% q5 K+ N! @: i% t破3、可以通过查询“网页http状态码 ”,分析网站返回的代码,判断问题原因。1 y5 x! m$ x0 w, v2 Q: K
还有一种情况,与你同IP服务器的网站被百度惩罚,从而牵连到你的网站。/ Q2 x+ J! J6 Q6 }2 q
要么你还淡定的坚持,等。要么换服务器。
/ L8 @/ Q6 j+ L+ U8 {* J! L破4、整理网站导航,理顺结构,让网站导航更清晰明了。/ ?: y; I+ N7 H+ u) R" h
调用文章标题到首页,增加一个“最新文章”、“文章推荐”等版块,增加内页入口。4 q3 Z: o" X" `% w( ^: o) o
破5、站内文章垃圾得百度蜘蛛都懒得去爬,你还祈求蜘蛛爬完首页爬内页?
* X# P! M! ?1 [% k7 U整理修改已经被百度收录的垃圾内容,清理未被收录的。
- f+ a7 h* r! D5 s# t8 a- A然后坚持有质量、有数量的更新网站内容,同时做好站外链接工作。" C. X/ a7 F2 P9 X* M5 j; ^: s+ r) t
破6、月初更新一篇,月末更新一篇,天天抱怨为什么“百度蜘蛛只爬网站的首页不爬内页”。
: l p6 |4 `8 c. O省省力气更新几篇文章吧。5 g$ m# I" A2 Q7 v; ^& @
百度蜘蛛像人一样,它本来是1天来一次,你网站没有更新。然后就2天来一次,你的网站依旧没有更新。然后的然后就是5、10、15。& p4 a* ?, f9 ]' x' K
百度蜘蛛也有自己的行为习惯的,虽然它的智能很低级,也不能置之不理。
3 B$ E; h# j; k$ ~$ X' E/ y破7、作为一个新站就低调点,别天天都纠结“百度蜘蛛只爬网站的首页不爬内页”的问题。3 Z( z+ h0 v% e! C
制定自己的网站优化方案,维护更新管理的网站,切忌使用任何作弊手法。1 Y5 _( g( q: I& R8 z U
破8、这个原因很难确定,如果以上原因你的网站都不存在,而你的网站也是“百度蜘蛛只爬网站的首页不爬内页”。8 ~; _& ~( \5 k/ x! q
那么,就可能是还处在百度的沙盒之中。
7 I/ }$ h! K5 I" d/ g, E& O这是百度对新网站的考查期,或者是网站被惩罚后的观察期。; W- m/ C t( p- m
淡定面对,积极执行已定的网站优化方案。
& ?4 ?1 q# A. c( Y% N5 P- I3 D今天就这么滴吧,希望南唐的文章能够帮到你。
+ r. E9 M0 R! K$ p! h% h1 G本文出自:南唐的网站优化博客,地址:http://www.ba77.com/post/15.html,转载须注明!2 e' R9 d$ M+ X8 V* u$ }* \
|