核心提示:百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。百度蜘蛛只爬网站的首页不爬内页,这是怎么回事?这个问题很多人都纠结的,特别是新站上线,久久不见收录量增加,更是心急火燎。+ f% F3 P( ?$ ^, ?6 i! ^6 c) C
首先解决一个问题,怎么知道“百度蜘蛛只爬网站首页不爬内页”?( |; q( v3 H2 I: z) e/ n
蜘蛛爬行情况可以通过网站IIS日志查看,日志里面清楚的记载着蜘蛛的爬行时间、爬行的页面、抓取的页面等信息。
9 w) ^ |0 J* H! N: g8 K% G! g神马?看不懂IIS日志?
& L( s4 }7 u7 a" f3 _: s( A网上有很多IIS日志分析工具,百度一下。这里推荐使用光年IIS日志分析工具,快速易用。) Q% a+ Y( G5 l
接下来,南唐给你分析下“百度蜘蛛只爬首页不爬内页”这个问题。
) k# j' J) Q) F! m# x% L, M“百度蜘蛛只爬网站的首页不爬内页”原因有如下:
9 ^5 o! I4 V% \% ?0 Q) d1、robots.txt,错误操作,屏蔽了内页。
$ R3 N2 [* i+ Q. b3 [0 D+ [6 J2、群发等作弊行为。/ M# u$ V! j7 C5 ^" u
3、服务器的原因。
( |: P/ O" P- U; T9 ^, ?6 @4、网站首页到内页的链接太少,导航结构混乱,导航不清楚。2 x. I+ e$ g7 l) k! ]" u- e
5、网站质量太烂,权重极低。
% `" Z* x" _1 \# c6、网站维护的时候三天打鱼两天晒网。
3 x6 ?% l' C r. J6 I$ I2 W+ k7、网站超级新,新的一塌糊涂。5 M7 j5 c- @) N4 C! h( C' z
8、网站还在百度的沙盒中,百度蜘蛛爬了,也抓取了,没有放页面快照。
+ W1 C, F d' H2 H首页能够被百度蜘蛛爬行,说明网站并不是让蜘蛛不屑一顾。% |9 D @* u$ E9 G
那肯定就是上面7条原因中的某一条或者N条,导致了“百度蜘蛛只爬网站的首页不爬内页”。" d+ ^" f8 q$ V9 n
探讨到此完毕,最后的最后呢,针对上面“百度蜘蛛只爬网站的首页不爬内页”的8条原因,我们一一击破。
* M$ y8 d! Y. b$ o& w9 F: {1-8 依次检查网站,逐一排除,逐一解决。* s) T6 [; ~# ]8 u* M3 ~0 A; z
8大爆破方案如下:8 @8 d4 _; ]$ t: e* R+ g
破1、robots.txt的问题,浏览器输入,查看下,一目了然。7 \ i8 U2 S8 m/ i2 ~
破2、这个情况,作为网站的维护者最清楚。如果有群发的seo作弊手法,造成百度蜘蛛只爬网站的首页不爬内页”很常见。7 D1 W, e: u/ F" V( ?2 J
处理方法:4 W' ]8 n( Z) ?2 b7 C
停止群发的一切seo作弊手法。3 T2 F/ A8 i; ~# C" Y
有规律并且持续的更新网站内容,网站内容最好原创,次点也要是高质量的伪原创。
?$ x7 o* }, o! v- M7 \ Y适当的做点外链和友情链接,引引蜘蛛。* X5 E) w2 u. G% C% d9 a/ E) h0 g
这种情况只能淡定的坚持,等。
- f4 F% T. d' {: ~破3、可以通过查询“网页http状态码 ”,分析网站返回的代码,判断问题原因。7 |- c. j$ w9 q1 X+ X, J
还有一种情况,与你同IP服务器的网站被百度惩罚,从而牵连到你的网站。
' s# J1 P5 I" H/ k# b要么你还淡定的坚持,等。要么换服务器。5 f* Z2 K6 q1 O) S6 X7 [3 b
破4、整理网站导航,理顺结构,让网站导航更清晰明了。
7 K0 |. T; M, y6 i/ d调用文章标题到首页,增加一个“最新文章”、“文章推荐”等版块,增加内页入口。; i: z. m# K) t2 m4 ]' h
破5、站内文章垃圾得百度蜘蛛都懒得去爬,你还祈求蜘蛛爬完首页爬内页?
3 R6 E4 @' x. d整理修改已经被百度收录的垃圾内容,清理未被收录的。
1 u9 N+ C: e7 R7 R然后坚持有质量、有数量的更新网站内容,同时做好站外链接工作。
0 ~$ S2 ?' Z% Y- R破6、月初更新一篇,月末更新一篇,天天抱怨为什么“百度蜘蛛只爬网站的首页不爬内页”。. ?6 O- o( U3 K% s
省省力气更新几篇文章吧。2 I/ O" b+ G8 X9 n' M
百度蜘蛛像人一样,它本来是1天来一次,你网站没有更新。然后就2天来一次,你的网站依旧没有更新。然后的然后就是5、10、15。
, E, c5 [( n b# R) X& r' k1 p百度蜘蛛也有自己的行为习惯的,虽然它的智能很低级,也不能置之不理。% @$ { {2 R* O: O: U0 }: u+ Q" b
破7、作为一个新站就低调点,别天天都纠结“百度蜘蛛只爬网站的首页不爬内页”的问题。
' b1 }. P' v) W! q! w制定自己的网站优化方案,维护更新管理的网站,切忌使用任何作弊手法。: P( f- s& y* }3 `2 z$ @ r
破8、这个原因很难确定,如果以上原因你的网站都不存在,而你的网站也是“百度蜘蛛只爬网站的首页不爬内页”。
& N7 G2 @ @/ R8 m' ^那么,就可能是还处在百度的沙盒之中。; i( W* v8 L" c0 ]8 ^; L" Y
这是百度对新网站的考查期,或者是网站被惩罚后的观察期。
6 H# x6 h# x: t9 t淡定面对,积极执行已定的网站优化方案。1 G1 k) x: t: v- z
今天就这么滴吧,希望南唐的文章能够帮到你。
J" Z* q: j2 {1 |本文出自:南唐的网站优化博客,地址:http://www.ba77.com/post/15.html,转载须注明!
8 ^# L' F2 b+ R4 U* L; i) \1 `% c |