核心提示：百度蜘蛛只爬网站的首页不爬内页，这是怎么回事？这个问题很多人都纠结的，特别是新站上线，久久不见收录量增加，更是心急火燎。蜘蛛爬行情况可以通过网站IIS日志查看，日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。百度蜘蛛只爬网站的首页不爬内页，这是怎么回事？这个问题很多人都纠结的，特别是新站上线，久久不见收录量增加，更是心急火燎。
% _+ Y2 Q4 q* j- f, f$ D' v首先解决一个问题，怎么知道“百度蜘蛛只爬网站首页不爬内页”？1 Z. i& K' e1 s9 r; e
蜘蛛爬行情况可以通过网站IIS日志查看，日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。
5 G7 \# Q( B2 M$ \& `神马？看不懂IIS日志？% }1 Z( y* @) L! D
网上有很多IIS日志分析工具，百度一下。这里推荐使用光年IIS日志分析工具，快速易用。6 m* ?2 R/ Q3 y8 k3 D3 K, j5 E$ a
接下来，南唐给你分析下“百度蜘蛛只爬首页不爬内页”这个问题。9 C- T; H/ Y# s" `) ^: y7 l% e' X
“百度蜘蛛只爬网站的首页不爬内页”原因有如下：, `' b- n2 u" u: a ]. N
1、robots.txt，错误操作，屏蔽了内页。
' {/ R& ?2 I3 X8 h2、群发等作弊行为。# f5 M* S1 \+ d5 s6 R% m. V
3、服务器的原因。% t7 [5 ^, I: U( N2 q+ l) s
4、网站首页到内页的链接太少，导航结构混乱，导航不清楚。
8 {) t1 R6 S) k* J) i$ \5、网站质量太烂，权重极低。+ L9 k8 `; K, O9 I ~& B0 }2 N
6、网站维护的时候三天打鱼两天晒网。) Z/ R9 m) k+ a( B$ q1 \ d7 @: A
7、网站超级新，新的一塌糊涂。+ K' j5 |; E8 [$ R: G- u& N
8、网站还在百度的沙盒中，百度蜘蛛爬了，也抓取了，没有放页面快照。* j3 ~- D, f$ @5 r: ]4 p
首页能够被百度蜘蛛爬行，说明网站并不是让蜘蛛不屑一顾。
7 W; j+ i6 H& @. n- b5 N9 b那肯定就是上面7条原因中的某一条或者N条，导致了“百度蜘蛛只爬网站的首页不爬内页”。
& K; a# a# O' O2 d( h探讨到此完毕，最后的最后呢，针对上面“百度蜘蛛只爬网站的首页不爬内页”的8条原因，我们一一击破。- t9 s, A2 O% K, [+ G1 |* x
1-8 依次检查网站，逐一排除，逐一解决。 L- K: _4 n3 P( b
8大爆破方案如下：
% J _* X9 t2 T, [. Y. R8 [+ H破1、robots.txt的问题，浏览器输入，查看下，一目了然。- J) w8 I m6 e* T* p4 {- i
破2、这个情况，作为网站的维护者最清楚。如果有群发的seo作弊手法，造成百度蜘蛛只爬网站的首页不爬内页”很常见。# ]* v: s5 `0 T. @+ I( ^, r
处理方法：. F& u7 \; C+ Z2 `
停止群发的一切seo作弊手法。
& n+ b- q. ]+ m+ K8 t& M- w! Y7 z$ ?有规律并且持续的更新网站内容，网站内容最好原创，次点也要是高质量的伪原创。
# K2 Z. R( K7 j- Y% l/ e适当的做点外链和友情链接，引引蜘蛛。
& k- O) L9 v9 c, z; A这种情况只能淡定的坚持，等。6 u( S2 R. C6 k7 _2 t9 y
破3、可以通过查询“网页http状态码 ”，分析网站返回的代码，判断问题原因。% B N0 B9 N @* E
还有一种情况，与你同IP服务器的网站被百度惩罚，从而牵连到你的网站。
F, L6 V: d d, m6 R& e要么你还淡定的坚持，等。要么换服务器。
/ {' c( |7 P R: V破4、整理网站导航，理顺结构，让网站导航更清晰明了。
7 w7 U( d a# R- ` v调用文章标题到首页，增加一个“最新文章”、“文章推荐”等版块，增加内页入口。
: Y1 M) U% o8 X) w# ~4 f破5、站内文章垃圾得百度蜘蛛都懒得去爬，你还祈求蜘蛛爬完首页爬内页？
5 t& @2 G! p' v% w3 s整理修改已经被百度收录的垃圾内容，清理未被收录的。" N. c" F: _. }, N0 ?9 r
然后坚持有质量、有数量的更新网站内容，同时做好站外链接工作。
) Y% F! i% a! P! y* r破6、月初更新一篇，月末更新一篇，天天抱怨为什么“百度蜘蛛只爬网站的首页不爬内页”。+ h; |3 q, _" a7 {0 e% ~
省省力气更新几篇文章吧。7 g/ T3 m3 O7 ?. ^( x7 U* ]( n
百度蜘蛛像人一样，它本来是1天来一次，你网站没有更新。然后就2天来一次，你的网站依旧没有更新。然后的然后就是5、10、15。6 _' [" i( O' G, V/ o) R' |
百度蜘蛛也有自己的行为习惯的，虽然它的智能很低级，也不能置之不理。" ?9 S' A+ h: u4 ~9 x( B9 m
破7、作为一个新站就低调点，别天天都纠结“百度蜘蛛只爬网站的首页不爬内页”的问题。
: o S5 N1 B3 {2 s8 i制定自己的网站优化方案，维护更新管理的网站，切忌使用任何作弊手法。
$ P3 M8 x. L8 R6 z& l破8、这个原因很难确定，如果以上原因你的网站都不存在，而你的网站也是“百度蜘蛛只爬网站的首页不爬内页”。
/ {# N! J0 X4 @3 e1 O; m/ q那么，就可能是还处在百度的沙盒之中。
) z( }. j% `$ T- w6 Q这是百度对新网站的考查期，或者是网站被惩罚后的观察期。. L5 p* v# X4 o/ U& S
淡定面对，积极执行已定的网站优化方案。( T& s) j) o' x$ M! q [( Z1 m6 z
今天就这么滴吧，希望南唐的文章能够帮到你。
" e* y* o6 U9 F( s1 A/ z, t/ q本文出自：南唐的网站优化博客，地址：http://www.ba77.com/post/15.html，转载须注明！- ~% A5 R4 A4 n/ j7 ]0 n; M
|
:)