|
0 W. b4 Q% ~" B9 p) Y2 K
优质段：116.179.32.*：新版百度蜘蛛，高权重段，一般抓取文章页IP段位于山西阳泉联通百度云计算阳泉中心位于世界最大中文搜索引擎百度公司创始人李彦宏的家乡山西省阳泉经济开发区东区220.181.108.75：重点抓取更新文章的内页达到90%，8%抓取首页，2%其他。 " U' d5 d6 E8 v. ^2 B' z
权重IP 段，爬过的文章或首页基本24小时放出来220.181.108.77：专用抓首页IP权重段，一般返回代码是304 0 0 代表未更新220.181.108.80：专用抓取首页IP权重段，一般返回代码是304 0 0 代表未更新。 : G0 V% R; K" d7 g A/ `* o
220.181.108.82：抓取tag页面220.181.108.83：专用抓取首页IP 权重段，一般返回代码是304 0 0 代表未更新220.181.108.86：专用抓取首页IP权重段，一般返回代码是304 0 0 代表未更新。 . S: g. H) p. v8 [; H
220.181.108.89：专用抓取首页IP权重段，一般返回代码是304 0 0 代表未更新220.181.108.91：属于综合的，主要抓取首页和内页或其他，属于权重IP 段，爬过的文章或首页基本24小时放出来。
* @! H1 c9 ]; x' L4 [ 220.181.108.92：同上98%抓取首页，可能还会抓取其他 (不是指内页)，属于权重IP段此段爬过的文章或首页基本24小时放出来220.181.108.94：专用抓取首页IP 权重段，一般返回代码是304 0 0 代表未更新。 ; x& }5 Y1 j( H" F- A
220.181.108.93：重点抓取内页，爬过的文章或首页基本24小时放出来220.181.108.95：这个是百度抓取首页的专用IP，如是220.181.108段的话，基本来说你的网站会天天隔夜快照，绝对错不了的。
/ h3 M4 y$ x( T% K1 t1 G 220.181.108.97：专用抓取首页IP 权重段，一般返回代码是304 0 0 代表未更新220.181.108.115：重点抓取内页，爬过的文章或首页基本24小时放出来220.181.108.119：专用抓取首页IP 权重段，一般返回代码是304 0 0 代表未更新。
' \! z- T! N4 a$ @4 A, g 220.181.108.156 重点抓取内页，爬过的文章或首页基本24小时放出来220.181.108.158：重点抓取内页，爬过的文章或首页基本24小时放出来220.181.108.184：重点抓取内页，爬过的文章或首页基本24小时放出来。
a6 |0 R0 H. L. `& W 220.181.108.180：重点抓取内页，爬过的文章或首页基本24小时放出来220.181.108.*：主要是抓取首页占80%，内页占30%，这此爬过的文章或首页，绝对24小时内放出来和隔夜快照的！一般成功抓取返回代码都是 200 0 0返回304 0 0代表网站没更新，蜘蛛来过，如果是 200 0 64别担心这不是K站，可能是网站是动态的，所以返回就是这个代码。 & T1 [+ e/ P4 Q* x, \3 C0 [
普通段：60.172.229.61：代表百度蜘蛛IP造访，准备抓取你东西，抓取网页的百度蜘蛛61.129.45.72：代表百度蜘蛛IP造访，准备抓取你东西，抓取网页的百度蜘蛛61.135.162.*：代表百度蜘蛛IP造访，准备抓取你东西，抓取网页的百度蜘蛛。 0 p0 @, F5 @1 @ i# Z! `4 `) {7 I
61.135.168.*：抓取图片的百度蜘蛛121.14.89.* ：这个ip段作为度过新站考察期，很少通常有它光顾的时候，网站基本上是没有排名的123.15.**.**：百度图片爬虫123.125.66.*：代表百度蜘蛛IP造访，准备抓取你东西，抓取网页的百度蜘蛛。 " L2 Z3 a/ H! F5 i$ S- N
123.125.71.* 抓取内页收录的，权重较低，爬过此段的内页文章暂时被收录但不放出来，因不是原创或采集文章124.166.232.*：可能为新版新站专属百度蜘蛛125.90.88.*：广东茂名市电信也属于百度蜘蛛IP 主要造成成分，是新上线站较多，还有使用过站长工具，或SEO综合检测造成的，没有多大用。
( P" c) ~, B4 d& g+ q, y 159.226.50.* ：百度蜘蛛180.76.5.*：百度蜘蛛北京联通180.76.5.87：百度蜘蛛北京电信210.72.225.*：这个ip段不间断巡逻各站，就是路过一下220.181.7.*：代表百度蜘蛛IP造访，准备抓取你东西，抓取网页的百度蜘蛛。
! s, m8 {. w; {4 Z8 C 垃圾段：百度自家61.135.186.* ：百度联盟爬虫，百度统计61.135.165.134：百度竞价蜘蛛北京联通61.135.169.*：百度公司内部专用IP；111.206.198.*：百度渲染蜘蛛，专门抓取js、css和图片用的，百度站长工具落地着陆页检测IP。
& `3 e; \8 D5 K' _) I- Z( e 111.206.221.*：百度渲染蜘蛛，专门抓取js、css和图片用的，百度站长工具落地着陆页检测IP117.34.74.66：百度竞价蜘蛛西安市电信118.122.188.194：百度竞价蜘蛛119.63.196.9：百度竞价蜘蛛。
R8 r% ]- x4 b7 I9 l7 \ 123.125.67.* ：百度站长工具的IP sitemap125.39.78.185：百度竞价蜘蛛天津联通203.119.241.*：百度主动推送的IP220.181.51.*：百度站长工具的IP sitemap。
! d6 Y7 T) J% w( R: m 220.181.108.120：抓取/robots.txt220.181.108.146：抓取/robots.txt沙盒123.125.68.*：这个蜘蛛经常来，别的来的少，表示网站可能要进入沙盒了，或被者降权。 / \! H5 P, X# w: |
180.76.15.*：降权蜘蛛，有这个ip说明网站不会在收录了，一直到这个ip段消失。220.181.68.*：每天这个IP 段只增不减很有可能进沙盒或K站。
. @) L7 f! L8 Z# k
; a" v7 U" g3 U O2 s1 k5 V, v( [# r; q' a2 u
' R. C6 [, f; v8 U+ s- b3 }9 w0 V$ Y3 m; n5 o5 \
| 
