核心提示：百度蜘蛛只爬网站的首页不爬内页，这是怎么回事？这个问题很多人都纠结的，特别是新站上线，久久不见收录量增加，更是心急火燎。蜘蛛爬行情况可以通过网站IIS日志查看，日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。百度蜘蛛只爬网站的首页不爬内页，这是怎么回事？这个问题很多人都纠结的，特别是新站上线，久久不见收录量增加，更是心急火燎。
( B! w" |) X8 o4 V: Z4 D首先解决一个问题，怎么知道“百度蜘蛛只爬网站首页不爬内页”？" {, \( @3 L) O+ h
蜘蛛爬行情况可以通过网站IIS日志查看，日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。- L0 g, j! |/ s/ Z/ x( d0 I
神马？看不懂IIS日志？
+ M- L* V' j1 t( ^* F+ B& N, h8 e- b5 Q网上有很多IIS日志分析工具，百度一下。这里推荐使用光年IIS日志分析工具，快速易用。
. t( }7 m% w5 T# O# M% F+ R( k0 `0 i接下来，南唐给你分析下“百度蜘蛛只爬首页不爬内页”这个问题。0 D, u" C( u$ T( t- r& b
“百度蜘蛛只爬网站的首页不爬内页”原因有如下：
4 M' h3 @4 Y8 o! x1、robots.txt，错误操作，屏蔽了内页。+ D* W2 L4 [9 [( [
2、群发等作弊行为。( e. x& O, L' I% t: C- B% r, V# Y
3、服务器的原因。1 ?9 U* Q" i! B4 A
4、网站首页到内页的链接太少，导航结构混乱，导航不清楚。
8 Y3 K/ L& A: S2 ~- u) _5、网站质量太烂，权重极低。
1 t8 `/ q. X8 z$ g6、网站维护的时候三天打鱼两天晒网。- B( I5 m. m% A$ W& e6 R t- a
7、网站超级新，新的一塌糊涂。" p$ b. b0 N% D8 c7 `* J
8、网站还在百度的沙盒中，百度蜘蛛爬了，也抓取了，没有放页面快照。. C9 G5 V7 V+ `' ~! n
首页能够被百度蜘蛛爬行，说明网站并不是让蜘蛛不屑一顾。+ t. V3 r: V7 \$ b
那肯定就是上面7条原因中的某一条或者N条，导致了“百度蜘蛛只爬网站的首页不爬内页”。5 G$ U$ ^1 O. D8 e" H. {
探讨到此完毕，最后的最后呢，针对上面“百度蜘蛛只爬网站的首页不爬内页”的8条原因，我们一一击破。* e1 j4 ~7 E1 V& Z" M
1-8 依次检查网站，逐一排除，逐一解决。1 z* z6 S4 ^1 n
8大爆破方案如下：7 N! v& f$ D) c( G1 ]
破1、robots.txt的问题，浏览器输入，查看下，一目了然。
8 X9 a$ ?5 ?- X" K& B, \破2、这个情况，作为网站的维护者最清楚。如果有群发的seo作弊手法，造成百度蜘蛛只爬网站的首页不爬内页”很常见。2 B4 Q* w) {$ C9 E% {8 I
处理方法：
8 m: A. A' t; r4 j停止群发的一切seo作弊手法。
# m& D B* A' f" i有规律并且持续的更新网站内容，网站内容最好原创，次点也要是高质量的伪原创。3 L8 V4 J8 u* a6 D6 H$ c
适当的做点外链和友情链接，引引蜘蛛。6 ^2 W6 x+ f" @+ D5 l* V/ S
这种情况只能淡定的坚持，等。
, V2 X! _3 k& Q0 X' y9 j2 N2 F3 o破3、可以通过查询“网页http状态码 ”，分析网站返回的代码，判断问题原因。
; j, R, W! U+ }: W# b% X q, u' G# e还有一种情况，与你同IP服务器的网站被百度惩罚，从而牵连到你的网站。
+ w3 Y! c' T# a+ {6 ^# x' L7 C8 X2 F要么你还淡定的坚持，等。要么换服务器。
% ]: j2 R' Y+ U' @# n破4、整理网站导航，理顺结构，让网站导航更清晰明了。8 E, a0 K5 m: l9 j& L7 K8 ?
调用文章标题到首页，增加一个“最新文章”、“文章推荐”等版块，增加内页入口。6 B' M6 G# V5 ~9 \/ N$ |
破5、站内文章垃圾得百度蜘蛛都懒得去爬，你还祈求蜘蛛爬完首页爬内页？& G- h' Q+ p, F3 `
整理修改已经被百度收录的垃圾内容，清理未被收录的。
( z% F1 h1 \4 o6 r然后坚持有质量、有数量的更新网站内容，同时做好站外链接工作。
+ x& ]% V. o! Y破6、月初更新一篇，月末更新一篇，天天抱怨为什么“百度蜘蛛只爬网站的首页不爬内页”。
# C+ J* [. d3 u7 ] \省省力气更新几篇文章吧。0 D! H* C( A7 i) q
百度蜘蛛像人一样，它本来是1天来一次，你网站没有更新。然后就2天来一次，你的网站依旧没有更新。然后的然后就是5、10、15。: n' d2 w6 ]* {! L9 f. Y
百度蜘蛛也有自己的行为习惯的，虽然它的智能很低级，也不能置之不理。$ A6 l+ m! o7 |) B
破7、作为一个新站就低调点，别天天都纠结“百度蜘蛛只爬网站的首页不爬内页”的问题。
4 f4 a' J4 r7 _! Y j制定自己的网站优化方案，维护更新管理的网站，切忌使用任何作弊手法。
$ m: ]% B$ B* Q% F/ S& n破8、这个原因很难确定，如果以上原因你的网站都不存在，而你的网站也是“百度蜘蛛只爬网站的首页不爬内页”。
3 S+ b$ w# L- {8 U那么，就可能是还处在百度的沙盒之中。) x5 t% ~9 W9 o' P
这是百度对新网站的考查期，或者是网站被惩罚后的观察期。
( s9 e( R; b" Y; B/ ]) X7 v淡定面对，积极执行已定的网站优化方案。2 v1 c# `0 R; v8 Z" F9 k* z0 ~
今天就这么滴吧，希望南唐的文章能够帮到你。* g+ w+ F+ N# M
本文出自：南唐的网站优化博客，地址：http://www.ba77.com/post/15.html，转载须注明！$ ?1 r* Z Z) d$ ]
|
:)