对,baiduspider就是我们SEOer口中经常说的百度蜘蛛,有些朋友可能发现baiduspider不止一个,是的。它有很多种,还有冒充的哦,所以我们在查看这些信息的时候不得不注意了,而今天我不仅要介绍百度的多种spider,还会说到如何查看冒充的baiduspider等等……
+ E: f5 Y, C& W" G, } t& `, l% Y1 s& n8 w
Baiduspider都有哪些(图)?* e5 c& p) A4 ~- l' r; Q
$ V6 g& |9 [& Y
( O1 o, f9 g5 z' l: p8 w
1 J" L8 V& \9 K' z& o4 Z3 @ 几种baiduspider的介绍
2 M- r& b3 @! E9 s. ~. \- a) N6 T1 N; j) n" p( j7 ?7 v0 B0 L
这里我们要说的就是最后一个百度spider,这个相信每一位seo朋友都很熟悉,因为这个是我们经常遇到的baiduspider,也就是网页搜索的spider,遇到其他的也不要慌张,因为上面我已经做了介绍,大家可以参照去自己的IIS日志里进行查看。
" W, j( n6 m! A
9 b; R. N4 x6 @: R: a Baiduspider的真假判断
/ x+ I9 k# E4 h. s, @' e) F$ E2 @; w9 {+ f/ L4 f
判断spider的真假我就不多太复杂的技术方法了,给大家提供一个工具进行辨别,这个SEO工具不仅简单方便,还大大节省了我们的时间,它就是Chinaz的IP地址查询工具(地址:http://ip.chinaz.com/),在你的IIS日志看到了Baiduspider,前面会有IP地址,这样进行查询,就简单方便多了!7 I$ E4 K+ Z$ j& F9 _/ _# q
9 ]* u' M& y! |+ j- s+ P 如何禁止Baiduspider抓取我的网站?" ~' }+ F& J( v+ c5 M
" D, D* I( @4 Q/ F# ] 如果你想禁止百度蜘蛛抓取你的网站的那请在robots协议注明,协议一般是这样:# [- w/ t M R- R- c) N8 P5 h1 [
% p. z9 w7 V+ R- s& Y& g5 g) J
User-agent: Baiduspider
7 Z2 G5 V: Q; k
3 b% A7 @% C A Disallow: /
$ e. R1 d- j5 E$ q# M I6 ^9 f# B( ~2 r( I, A# m
为了表示的更准确些我调用一张图片为大家进行描述:2 O \2 R- U% c$ X
7 S" W: {2 H2 ^7 N+ n
2 J9 N# `) ~- B! ]& |/ V
1 J, P3 m, }( a' O- E- X4 a+ x 设置robots的说明
! h% s* c9 h7 a) Q c, L {* g z5 D# Y6 ^0 S9 w
好了,关于百度蜘蛛的常见问题基本就这些,希望能够帮到你,如果你对关于百度spider有其他的问题欢迎你评论给我,我会第一时间给与回复!) {& _! K( H7 U* w3 N2 O5 Y
|2 l# f5 s0 B3 x& W 刚刚就在我写文章的时候有朋友和我提到:“你的SEO博客最近怎么总是发布SEO技术基础的东西呢?”终于有人给我提意见了,太谢谢了,我明天会给一些我实践过的SEO技术,敬请期待!本文来源地址:www.dyd21cn.com
( {5 v7 Q" o, @0 z
3 {8 r; k. j0 u- \* U- } |