核心提示:百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。; R5 C( Y. A% b5 ?# k) F8 v" H
首先解决一个问题,怎么知道“百度蜘蛛只爬网站首页不爬内页”?
- ^ ]) C T3 f蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。
' J7 L$ O6 y% W- |神马?看不懂IIS日志?
( X, [3 q( r& ~网上有很多IIS日志分析工具,百度一下。这里推荐使用光年IIS日志分析工具,快速易用。0 S6 g+ t* `! f7 p/ }
接下来,南唐给你分析下“百度蜘蛛只爬首页不爬内页”这个问题。
# A$ Z; V0 e2 r4 V“百度蜘蛛只爬网站的首页不爬内页”原因有如下:
& O. _% f/ J, L1 _" I: U( M; P6 g1、robots.txt,错误操作,屏蔽了内页。* S. e6 R4 W- r& |- m
2、群发等作弊行为。( `% f. {( A- {3 [; |
3、服务器的原因。; h- s+ W% q. ^, O
4、网站首页到内页的链接太少,导航结构混乱,导航不清楚。
, s3 t+ n+ I( j0 T2 v5、网站质量太烂,权重极低。
* f3 K* ?; w9 b6、网站维护的时候三天打鱼两天晒网。
4 [8 E+ {1 l9 T U p/ q* F: u7、网站超级新,新的一塌糊涂。
( Q7 V* U/ u3 Q; t- Y8、网站还在百度的沙盒中,百度蜘蛛爬了,也抓取了,没有放页面快照。
- J9 D3 j& o( C6 f' t& r6 _首页能够被百度蜘蛛爬行,说明网站并不是让蜘蛛不屑一顾。
; [ ]( A7 N- J8 Y3 }8 z% g那肯定就是上面7条原因中的某一条或者N条,导致了“百度蜘蛛只爬网站的首页不爬内页”。, M! Y' C$ ~- |" \5 H2 X& k
探讨到此完毕,最后的最后呢,针对上面“百度蜘蛛只爬网站的首页不爬内页”的8条原因,我们一一击破。
# W( [5 d9 Z* |1-8 依次检查网站,逐一排除,逐一解决。
) E q" C1 n& h( f8大爆破方案如下:, Y: W2 b4 i8 D4 X9 x* q6 g
破1、robots.txt的问题,浏览器输入,查看下,一目了然。/ q2 Q& t% m+ v: W- \2 _
破2、这个情况,作为网站的维护者最清楚。如果有群发的seo作弊手法,造成百度蜘蛛只爬网站的首页不爬内页”很常见。
- L* \3 H- {) t. L- N9 }处理方法:
6 u" D, Y2 Z; H4 S0 P" G停止群发的一切seo作弊手法。 }, m+ ?5 L( X- M8 @7 N
有规律并且持续的更新网站内容,网站内容最好原创,次点也要是高质量的伪原创。
% u$ c6 c8 `0 a: s适当的做点外链和友情链接,引引蜘蛛。
/ D: H: A5 @+ K% R Y R4 V: m: E3 z这种情况只能淡定的坚持,等。+ ^" e7 I9 P( A7 x$ Z3 f6 j
破3、可以通过查询“网页http状态码 ”,分析网站返回的代码,判断问题原因。" I6 V# I3 O4 W8 z( j5 T
还有一种情况,与你同IP服务器的网站被百度惩罚,从而牵连到你的网站。' F3 y5 ?# Z, C5 R3 v
要么你还淡定的坚持,等。要么换服务器。! F, x- y3 `# {" L6 V
破4、整理网站导航,理顺结构,让网站导航更清晰明了。9 U# V% o) m# r0 e
调用文章标题到首页,增加一个“最新文章”、“文章推荐”等版块,增加内页入口。
6 _ Q9 ~" s2 L0 e6 ]破5、站内文章垃圾得百度蜘蛛都懒得去爬,你还祈求蜘蛛爬完首页爬内页?. O4 |& j. b! i; C# H- G7 Q
整理修改已经被百度收录的垃圾内容,清理未被收录的。
2 `/ M$ V1 W. c/ ^4 e然后坚持有质量、有数量的更新网站内容,同时做好站外链接工作。
) A" e( N6 S$ ?7 t! ?; u1 B+ _破6、月初更新一篇,月末更新一篇,天天抱怨为什么“百度蜘蛛只爬网站的首页不爬内页”。
4 n# ^) ` Z/ \) P8 k9 B# l0 O7 s省省力气更新几篇文章吧。
7 l. m# K. f0 j" l$ o0 F& z百度蜘蛛像人一样,它本来是1天来一次,你网站没有更新。然后就2天来一次,你的网站依旧没有更新。然后的然后就是5、10、15。
4 N9 m6 q4 O7 m9 d3 _7 w! h百度蜘蛛也有自己的行为习惯的,虽然它的智能很低级,也不能置之不理。
- [3 Q+ O4 u3 }8 R- _破7、作为一个新站就低调点,别天天都纠结“百度蜘蛛只爬网站的首页不爬内页”的问题。2 M) f( J2 j) p: X$ w0 u& q7 }8 A
制定自己的网站优化方案,维护更新管理的网站,切忌使用任何作弊手法。
5 ]+ l; O* \& f8 u3 _) D0 }破8、这个原因很难确定,如果以上原因你的网站都不存在,而你的网站也是“百度蜘蛛只爬网站的首页不爬内页”。* K+ S2 d- Q7 e, E9 L" i1 E9 Y
那么,就可能是还处在百度的沙盒之中。
: J# ]; y. t8 ~" S这是百度对新网站的考查期,或者是网站被惩罚后的观察期。0 z# X" ]% a! A! Q. @- \& N
淡定面对,积极执行已定的网站优化方案。
: c# L3 d& N; w, E6 D今天就这么滴吧,希望南唐的文章能够帮到你。2 c% X2 k9 b. i: k# L2 }/ l& q6 B
本文出自:南唐的网站优化博客,地址:http://www.ba77.com/post/15.html,转载须注明!$ X0 l0 n [4 ?* x e) c& m
|