核心提示：百度蜘蛛只爬网站的首页不爬内页，这是怎么回事？这个问题很多人都纠结的，特别是新站上线，久久不见收录量增加，更是心急火燎。蜘蛛爬行情况可以通过网站IIS日志查看，日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。百度蜘蛛只爬网站的首页不爬内页，这是怎么回事？这个问题很多人都纠结的，特别是新站上线，久久不见收录量增加，更是心急火燎。: K& f2 ~6 J; K9 _* ? A9 L8 i
首先解决一个问题，怎么知道“百度蜘蛛只爬网站首页不爬内页”？
. J8 Z( R3 P. f" b3 A( S0 w3 q蜘蛛爬行情况可以通过网站IIS日志查看，日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。
) b6 ?1 L, z; t3 Y |: K) h# Y神马？看不懂IIS日志？
( s2 I$ v }3 c网上有很多IIS日志分析工具，百度一下。这里推荐使用光年IIS日志分析工具，快速易用。
4 z% j4 }) [# s: @ }' V接下来，南唐给你分析下“百度蜘蛛只爬首页不爬内页”这个问题。
3 H1 F, ]) \- H7 O* r4 V$ }“百度蜘蛛只爬网站的首页不爬内页”原因有如下：" u, u `8 C$ j9 M/ ?& [
1、robots.txt，错误操作，屏蔽了内页。) N5 x6 C7 X5 O9 T) D$ D
2、群发等作弊行为。( b' S; O) X% ?+ M6 P
3、服务器的原因。& l$ I2 f" |5 Z9 H7 ?$ h: }
4、网站首页到内页的链接太少，导航结构混乱，导航不清楚。
) \# J! M% _' ?3 c5、网站质量太烂，权重极低。3 M7 A) C. l: R3 h2 F$ |
6、网站维护的时候三天打鱼两天晒网。! \4 o% J) t3 F: j6 S S- ~, b
7、网站超级新，新的一塌糊涂。' e v' i# O& n) w4 \! j; a
8、网站还在百度的沙盒中，百度蜘蛛爬了，也抓取了，没有放页面快照。4 Z: {' ?9 G" I% l' r3 r
首页能够被百度蜘蛛爬行，说明网站并不是让蜘蛛不屑一顾。+ h$ X' s6 o2 ~, S( |$ U8 s
那肯定就是上面7条原因中的某一条或者N条，导致了“百度蜘蛛只爬网站的首页不爬内页”。2 P) `; {1 b g- w6 m+ e
探讨到此完毕，最后的最后呢，针对上面“百度蜘蛛只爬网站的首页不爬内页”的8条原因，我们一一击破。
( s- D" S2 M5 y t5 ^. C+ N1-8 依次检查网站，逐一排除，逐一解决。
; j+ \% g! V& ~+ z$ W0 Q! _7 x8大爆破方案如下：( d/ O A6 { @ B5 d1 V- g
破1、robots.txt的问题，浏览器输入，查看下，一目了然。
! D' }7 a& j- Q破2、这个情况，作为网站的维护者最清楚。如果有群发的seo作弊手法，造成百度蜘蛛只爬网站的首页不爬内页”很常见。" X/ U9 p5 S$ U7 T% c# z( j* [
处理方法：, Q2 |( t0 g* @+ T
停止群发的一切seo作弊手法。
4 d* |4 c7 p6 X. b: i有规律并且持续的更新网站内容，网站内容最好原创，次点也要是高质量的伪原创。( X! c7 q* K, i) j# z$ F+ r
适当的做点外链和友情链接，引引蜘蛛。6 t9 Q% o8 @0 c/ N- {; x" B
这种情况只能淡定的坚持，等。" h0 Z- Q3 N B3 O) U4 `. l3 @
破3、可以通过查询“网页http状态码 ”，分析网站返回的代码，判断问题原因。
- ?! s/ ~1 f2 E2 W0 ?8 |$ L0 {; W还有一种情况，与你同IP服务器的网站被百度惩罚，从而牵连到你的网站。
# d3 s+ A6 \5 i# j4 O9 L要么你还淡定的坚持，等。要么换服务器。/ k; z! K" H. U7 p
破4、整理网站导航，理顺结构，让网站导航更清晰明了。
7 S% z: f: l4 U9 v7 Z调用文章标题到首页，增加一个“最新文章”、“文章推荐”等版块，增加内页入口。) \3 \% K* d1 y9 e* i& O
破5、站内文章垃圾得百度蜘蛛都懒得去爬，你还祈求蜘蛛爬完首页爬内页？
9 m/ W! @) v6 F3 q2 Q$ G' g" C5 E整理修改已经被百度收录的垃圾内容，清理未被收录的。3 O1 V7 A6 b% [
然后坚持有质量、有数量的更新网站内容，同时做好站外链接工作。
7 `; u3 A& t8 r" q# b- h破6、月初更新一篇，月末更新一篇，天天抱怨为什么“百度蜘蛛只爬网站的首页不爬内页”。
8 A2 V5 ~( M* d# i+ Y7 ?省省力气更新几篇文章吧。
3 L8 Q2 |& V6 Y4 G# B/ L* f百度蜘蛛像人一样，它本来是1天来一次，你网站没有更新。然后就2天来一次，你的网站依旧没有更新。然后的然后就是5、10、15。
8 T8 ? w6 K$ L. W5 }) e' @& E百度蜘蛛也有自己的行为习惯的，虽然它的智能很低级，也不能置之不理。2 S' n3 l+ p$ E9 D2 b/ q
破7、作为一个新站就低调点，别天天都纠结“百度蜘蛛只爬网站的首页不爬内页”的问题。; R. j& }! r2 v; G) S
制定自己的网站优化方案，维护更新管理的网站，切忌使用任何作弊手法。# O' V$ c( c2 S w9 H7 N
破8、这个原因很难确定，如果以上原因你的网站都不存在，而你的网站也是“百度蜘蛛只爬网站的首页不爬内页”。
3 \/ W# u1 C% C" D那么，就可能是还处在百度的沙盒之中。
/ Z5 k9 u- z, Y' a# n: s这是百度对新网站的考查期，或者是网站被惩罚后的观察期。
1 W- i$ g: I) d& h淡定面对，积极执行已定的网站优化方案。
) T7 Z& a6 y. B" z: P: U5 O今天就这么滴吧，希望南唐的文章能够帮到你。, a) H3 `" k. ~) E( |
本文出自：南唐的网站优化博客，地址：http://www.ba77.com/post/15.html，转载须注明！
) i, K: \" O; x |
:)