网站日志是记录服务器的日常动态，特别是搜索引擎爬行和抓取的动态，通过日志能很清晰的分析出来。看看哪些页面被过度抓取，哪些始终没有被爬行，每个页面的平均抓取时间，蜘蛛每次访问网站的抓取深度，蜘蛛每天到访网站的次数等等，这些都能直接反应网站目前的问题。 7 w( t2 N/ Y! `- c9 G
可以说网站日志对于网络推广来说就像是一面镜子，我们可以从中发现网络推广中的不足，这样就可以不断的完善我们的推广思路，大家有时可能会感觉做的站很多了，凭经验就可以全权把握网络推广的各个细节，其实不然，最近一段时间百度不断更新，百度收录和外链情况让大家一时摸不着北，如果能勤看一下网站日志这些就很容易搞定了。: b3 e, E5 f$ d, N4 [
$ _# r r9 B; f ]$ {
在网站日志中，大家都能清晰的看到页面的抓取排行，URL的抓取排行，这些排行最能直接的反应网站的那些部分是最受蜘蛛欢迎的。团表网推广专员提醒大家注意，如果出现了很多css或js的文件都被大量的访问，那么页面中这样的链接就大大浪费了权重，所以需要修改robots文件给予禁止。& e8 u( Z1 q! L! F, ? S+ K) T
% \, e; L9 d' k4 K' Z9 J8 I, b 通过查看网站日志，站长们还能明显的看到哪些内容被过度抓取，纳些重点内容抓取的较少，这样观察之后就能做到心中有数，可以有的放矢。如果长时间的网站出现内容的重复堆积，久而久之百度就会认为你的站已经被抓取过了，就不会每天光顾了。$ A, `) F% t' e' z) I
1 E: c6 x3 P$ o/ P' O, |% M5 M# v
每个网站或多或少的都有404错误页面，这是不可避免的现象。有时候是空间上本身问题，有时候是自身网站的设置问题，有时候是外部网站存在外部链接的问题，从网站日志中一旦发现，就应该立刻调整。如果是抓取某个URL404特别多的话，需要在网站上建立这样一个URL页面，有效的利用，也可以修改robots文件给予屏蔽，禁止抓取。
( G3 O9 M' T6 j$ ~6 m* [
3 j a# ^8 }4 k% l3 }: \ 网络推广确实很占时间，但大家每天抽点时间看一下网站日志，不用太多的时间就可以每天为网站把脉，虽然磨刀不误砍柴工用在这里不是很恰当，但能给大家带来帮助才是最有用的。$ Y" z4 l/ l9 L
( T* H- N* C$ X
|
