核心提示:百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。: c3 E0 u0 l1 I8 ]. g% u+ X
首先解决一个问题,怎么知道“百度蜘蛛只爬网站首页不爬内页”?
+ k7 \8 v. i. ]5 x蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。
) _1 f( N F/ P! w2 L神马?看不懂IIS日志?$ ~! z, i! M' B5 g
网上有很多IIS日志分析工具,百度一下。这里推荐使用光年IIS日志分析工具,快速易用。- k" f8 E K0 s
接下来,南唐给你分析下“百度蜘蛛只爬首页不爬内页”这个问题。" x% E0 n% [9 b$ n: A
“百度蜘蛛只爬网站的首页不爬内页”原因有如下:2 H) i# Y/ m2 O0 N
1、robots.txt,错误操作,屏蔽了内页。. T9 x" o( c! d9 {: p
2、群发等作弊行为。. z. e5 v) k1 l* u
3、服务器的原因。9 x% o8 u6 ]1 T% ?+ f5 q$ N
4、网站首页到内页的链接太少,导航结构混乱,导航不清楚。" R! b$ ^- Z3 R
5、网站质量太烂,权重极低。 {6 z p) P+ ~& e- S0 @8 e
6、网站维护的时候三天打鱼两天晒网。7 W& o/ S8 K' B7 x! E' ]3 l
7、网站超级新,新的一塌糊涂。
0 D4 Y5 e* f. a4 }- |8、网站还在百度的沙盒中,百度蜘蛛爬了,也抓取了,没有放页面快照。
* {. P4 S# b( A. J" Y p首页能够被百度蜘蛛爬行,说明网站并不是让蜘蛛不屑一顾。$ b+ C. s/ R8 p' E4 s
那肯定就是上面7条原因中的某一条或者N条,导致了“百度蜘蛛只爬网站的首页不爬内页”。
! |. r" C5 i" T3 r) L# B探讨到此完毕,最后的最后呢,针对上面“百度蜘蛛只爬网站的首页不爬内页”的8条原因,我们一一击破。
- d+ R" c& c2 H" n1-8 依次检查网站,逐一排除,逐一解决。/ U( y0 U. p+ b7 h
8大爆破方案如下:: [: v. [- `6 ~
破1、robots.txt的问题,浏览器输入,查看下,一目了然。4 A. s3 ?! a4 h! |! I
破2、这个情况,作为网站的维护者最清楚。如果有群发的seo作弊手法,造成百度蜘蛛只爬网站的首页不爬内页”很常见。
# [( u. E# e! H处理方法:
' y3 \: ^; t' i8 ?# n! p停止群发的一切seo作弊手法。
3 p$ w' T, B1 Z1 l有规律并且持续的更新网站内容,网站内容最好原创,次点也要是高质量的伪原创。
8 a; \, c: Z* I! j. ^0 J适当的做点外链和友情链接,引引蜘蛛。
3 a$ X: _ m3 f- g: H这种情况只能淡定的坚持,等。8 M, Q+ j" z( S4 J+ y* p# n% e7 B
破3、可以通过查询“网页http状态码 ”,分析网站返回的代码,判断问题原因。' \' ~: p, M7 ?% G' h1 p
还有一种情况,与你同IP服务器的网站被百度惩罚,从而牵连到你的网站。) D5 A! w0 P( f
要么你还淡定的坚持,等。要么换服务器。5 u! P! h+ Q' C! F' y' [
破4、整理网站导航,理顺结构,让网站导航更清晰明了。
" H- ^0 E# N q, e2 O调用文章标题到首页,增加一个“最新文章”、“文章推荐”等版块,增加内页入口。" B6 [) u, \ z) T4 `+ R. i
破5、站内文章垃圾得百度蜘蛛都懒得去爬,你还祈求蜘蛛爬完首页爬内页?$ W; r# v0 r! h& c. ^
整理修改已经被百度收录的垃圾内容,清理未被收录的。; s2 L# h5 V! p, r7 G& A
然后坚持有质量、有数量的更新网站内容,同时做好站外链接工作。
0 h# e0 c( o( @( @0 @* R& z' f破6、月初更新一篇,月末更新一篇,天天抱怨为什么“百度蜘蛛只爬网站的首页不爬内页”。0 @8 g" e6 x, _4 {6 f& r$ r/ y( {# j
省省力气更新几篇文章吧。
! q b! x; R) |/ `2 ^3 \百度蜘蛛像人一样,它本来是1天来一次,你网站没有更新。然后就2天来一次,你的网站依旧没有更新。然后的然后就是5、10、15。
& |& q% A! Y; \$ L百度蜘蛛也有自己的行为习惯的,虽然它的智能很低级,也不能置之不理。7 b. z2 o A; K% H8 ]! g
破7、作为一个新站就低调点,别天天都纠结“百度蜘蛛只爬网站的首页不爬内页”的问题。
( r, A7 l, K# Y$ \/ k制定自己的网站优化方案,维护更新管理的网站,切忌使用任何作弊手法。( g+ w0 S! C$ v' w* W; n L5 }. }9 d
破8、这个原因很难确定,如果以上原因你的网站都不存在,而你的网站也是“百度蜘蛛只爬网站的首页不爬内页”。
/ [" U6 v2 z9 Q p8 G1 J) S那么,就可能是还处在百度的沙盒之中。
* P# G8 z7 J7 p$ n, x这是百度对新网站的考查期,或者是网站被惩罚后的观察期。# o! o$ U5 }& |7 {: D' V- T' a
淡定面对,积极执行已定的网站优化方案。
9 [) X- r& G& y0 S; Y- s+ c今天就这么滴吧,希望南唐的文章能够帮到你。1 |: h* T5 B. Y4 I6 }/ A9 W$ o
本文出自:南唐的网站优化博客,地址:http://www.ba77.com/post/15.html,转载须注明!
) _! U: ]1 a" E* ]4 ^% w: C( z |