|
|
做网站有大半年了，今天第一次写这类文章。至于为啥要写这篇文章，是由于 2009年下半年以来一直到此刻，百度往往不正常，引起很多站长的网站呈现快照不更新，快照回档，甚至被K的征象。于是在A5论坛和搜索引擎优化why论坛上往往看到有些站长说，希望百度能尽快更新自己的快照。实在快照第二天是否更新，不必然要寄希望于他人，只要自己查查web日记，就能了解。也就是我今天要跟大师说的话题。
) w6 s, z+ z4 l
9 `3 Y/ J4 S& g+ n9 o0 z: W 下面我就简单的谈一下对于百度蜘蛛拜候网站后，web日记所返回的状态码与首页的百度快照是否会更新之间的关系，所谈到的都是小弟大半年以来天天察看自己网站的web日记里百度蜘蛛的爬行陈迹所摸索出来的规律，希望对大师有些帮助。, O2 E! Q' t: R" g, S" {. ?- n0 P
1 l& T. x3 M' B; d. d# g 大师能够测验测验着打开web日记的log文件，web日记的默认路径是C:\WINDOWS\system32\LogFiles\W3SVC1 ，用虚拟主机的伴侣能够找空间商索要。打开文件夹下的log文件，搜索百度蜘蛛，百度蜘蛛的名字为baiduspider。然后一直Enter，能够查出百度蜘蛛拜候网站后留下的所有萍踪。在查找中，留意一下百度蜘蛛名字前面的IP，还有整行最后的状态码。
8 v$ W% z& k% H$ p: v% e
3 [; I1 n; p2 C" |( z7 k" K, f, c 一般环境下，蜘蛛抓取网页假如返回200 0 0代码，则呈现该网页已经获胜编入索引，200 0 64是指索引数据库已经存在，没有发现网页有更新的内容，不需要从头索引的看法。304 0 0是指本来缓冲的文档还能够继续应用，跟200 0 64看法应当差未几吧。 (值得一提的是：200 0 64并不是网上很多人说的会被K站或降权，是正常征象,动态网站抓取的期间大大都呈现200 0 0，即便是网站没有更新。)
5 _# \' A$ H& i4 l$ W+ S) V0 }& X1 j0 y6 a/ J
在说一下蜘蛛IP，我的web日记里查到的蜘蛛IP一般都是2201817*和12312566*比较多，还有一个61135162*，这三个段的IP是抓取网页的，12312568*这个段的是百度沙盒蜘蛛IP。61135168*这个段的蜘蛛是抓取图片的。不过百度蜘蛛应当还有很多，可能是按照网站的地区和线路发放蜘蛛的吧。具体环境还要具体对待。不过有一点能够必定的是，在网站没被降权的环境下，只要有两个IP段的蜘蛛(比如我的日记里的2201817*和12312566*这两个段)都抓取了网站首页且返回的状态码是200 0 0，那就不消天天比及零晨四点看百度更新首页的快照了(我以前往往比及凌晨四五点才就寝，呵呵，不过此刻一般都是在早上六七点才更新快照)。/ }8 T7 @. J# ^. ~; K) d1 c; t; V
% @; q8 S/ i0 d9 e. q 一般百度首页快照比较慢、网站权重比较低或者被降权的网站，蜘蛛一般都是返回的200 0 64的状态码。我有一个被K过的网站，那时天天都只有12312568*这个段的IP，且状态码都是返回的200 0 0。, y4 z) V2 S3 P7 Y
|
|
