|
|
做网站有大半年了，今天第一次写这类文章。至于为啥要写这篇文章，是由于 2009年下半年以来一直到此刻，百度往往不正常，引起很多站长的网站呈现快照不更新，快照回档，甚至被K的征象。于是在A5论坛和搜索引擎优化why论坛上往往看到有些站长说，希望百度能尽快更新自己的快照。实在快照第二天是否更新，不必然要寄希望于他人，只要自己查查web日记，就能了解。也就是我今天要跟大师说的话题。! g* x- l0 @3 `# t
/ w4 B2 }5 w# p6 A G! V" o4 i7 P: I
下面我就简单的谈一下对于百度蜘蛛拜候网站后，web日记所返回的状态码与首页的百度快照是否会更新之间的关系，所谈到的都是小弟大半年以来天天察看自己网站的web日记里百度蜘蛛的爬行陈迹所摸索出来的规律，希望对大师有些帮助。+ U! A- G3 L3 U( g
5 `5 @" O* C7 o/ \0 }; @) P 大师能够测验测验着打开web日记的log文件，web日记的默认路径是C:\WINDOWS\system32\LogFiles\W3SVC1 ，用虚拟主机的伴侣能够找空间商索要。打开文件夹下的log文件，搜索百度蜘蛛，百度蜘蛛的名字为baiduspider。然后一直Enter，能够查出百度蜘蛛拜候网站后留下的所有萍踪。在查找中，留意一下百度蜘蛛名字前面的IP，还有整行最后的状态码。
7 U! U6 y: E9 a! i; {5 {
# A9 b- r6 `, f" M1 A 一般环境下，蜘蛛抓取网页假如返回200 0 0代码，则呈现该网页已经获胜编入索引，200 0 64是指索引数据库已经存在，没有发现网页有更新的内容，不需要从头索引的看法。304 0 0是指本来缓冲的文档还能够继续应用，跟200 0 64看法应当差未几吧。 (值得一提的是：200 0 64并不是网上很多人说的会被K站或降权，是正常征象,动态网站抓取的期间大大都呈现200 0 0，即便是网站没有更新。)
8 k7 e/ Z \6 b' q B
6 N4 ?) ]" }& u4 ]8 f8 m 在说一下蜘蛛IP，我的web日记里查到的蜘蛛IP一般都是2201817*和12312566*比较多，还有一个61135162*，这三个段的IP是抓取网页的，12312568*这个段的是百度沙盒蜘蛛IP。61135168*这个段的蜘蛛是抓取图片的。不过百度蜘蛛应当还有很多，可能是按照网站的地区和线路发放蜘蛛的吧。具体环境还要具体对待。不过有一点能够必定的是，在网站没被降权的环境下，只要有两个IP段的蜘蛛(比如我的日记里的2201817*和12312566*这两个段)都抓取了网站首页且返回的状态码是200 0 0，那就不消天天比及零晨四点看百度更新首页的快照了(我以前往往比及凌晨四五点才就寝，呵呵，不过此刻一般都是在早上六七点才更新快照)。
$ D' ~6 e7 z8 m2 K( I$ E7 l4 x, ?
# j+ D9 y- E) |: g 一般百度首页快照比较慢、网站权重比较低或者被降权的网站，蜘蛛一般都是返回的200 0 64的状态码。我有一个被K过的网站，那时天天都只有12312568*这个段的IP，且状态码都是返回的200 0 0。$ M/ Y- u0 N: C! N- R
|
|
