|
) f8 T' b' L( R; f5 f% W' G+ G 石家庄seo培训:如何查看百度蜘蛛是否来过网站？如何正确识别百度蜘蛛？如何进行蜘蛛的抓取诊断？如何通过百度蜘蛛IP得知网站状态？今天，小小课堂网为大家介绍的是百度搜索引擎蜘蛛分析希望对大家有所帮助  * i3 j' T8 l ^6 Y8 c, }& ^9 w9 |
一、如何查看百度蜘蛛是否过来网站可以通过查看网站日志进行分析Windows服务器的IIS与Linux服务器的apache都有记录网站日志的功能二、如何辨别百度蜘蛛百度官方给出的辨别百度蜘蛛的方法如下1、查看UA 2 a! x- {" T" p% z$ q
首先要UA正确，百度公布过的UA有如下这些移动UA:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+。 ! N& D, L! K2 L/ E4 J
http://www.baidu.com/search/spider.html)PC UA:Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html） 4 P5 _: }$ p. s8 J* O/ T
新增渲染UA:移动UA：Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143Safari/601.1 (compatible; Baiduspider-render/2.0; +
r* ?6 k' j7 u) F6 \ http://www.baidu.com/search/spider.html)PC UA：Mozilla/5.0 (compatible;Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
" G) V. B" X# E6 h2 ~! W) u 2、反查IP可以通过dns反差ip的方法判断是否是百度蜘蛛，只要不是来自“. baidu . com”或“. baidu . jp”即为假冒的百度蜘蛛三、如何诊断百度蜘蛛是否能够正常抓取网站内容石家庄seo培训。
! N5 |$ }2 P6 ?7 `% U$ F" z W6 Y 认为很多网站因使用JavaScript代码或框架结构等问题，不能被百度蜘蛛所抓取这里进行诊断也是为了防止蜘蛛来网站后，因为不能正常抓取而离开，导致网站收录很差，快照不更新等问题如果诊断结果有问题，则需要修正问题，提升与百度蜘蛛的友好度。 2 k$ j; X, c; y/ V
百度官方在线抓取诊断工具如下图所示，选好网站（主页或其他页面）后，选择PC UA 或者移动UA，最后点击“抓取”即可。 
" F! }8 S+ u4 n% o M7 ~$ |( w 稍等片刻，刷新页面会显示“抓取成功”，或者失败可以点击查看“抓取成功”或失败的详细信息四、如何通过百度蜘蛛IP得知网站状态石家庄seo培训认为以下内容仅供参考1、抓取你网站的网页蜘蛛60.172.229.61。 ! \0 d, }$ O0 K C
61.129.45.7261.135.162.*2、百度竞价蜘蛛61.135.165.134117.34.74.66118.122.188.194119.63.196.9125.39.78.1853、百度统计 : `0 W/ \+ n1 f l1 l- A
的蜘蛛61.135.186.*4、站长工具的模仿的百度蜘蛛61.147.98.14661.188.39.16113.98.254.245117.21.220.245117.28.255.425、搜外站长工具的模仿的百度蜘蛛 3 [0 T2 h9 y* @9 o- Y$ S: \% g7 S
124.248.34.526、114站长工具箱模仿的百度蜘蛛119.147.114.213121.10.141.*7、百度图片蜘蛛123.15.**.**8、抓取网站内页收录的权重较低的非原创，需要通过一段时间考察
' C- Q; D; j9 T, ~1 U2 ?, P 123.125.71.*9、站长工具检测造成的无用125.90.88.*10、百度考察期蜘蛛或降权蜘蛛159.226.50.*180.76.5.*180.76.5.87220.181.158.10711、伪装百度蜘蛛 : B, k( y& m' I' m
180.149.130.*12、新站及站点有不正常现象183.91.40.144203.208.60.*13、不间断巡逻各站就是路过 210.72.225.*14、沙盒或者有被K站123.125.68.* % N) ]' O1 f9 L7 v
218.30.118.102220.181.68.*15、此ip爬过的文章或首页，绝对24小时内放出来和隔夜快照220.181.108.*16、百度蜘蛛IP来过，准备抓取123.125.66.*220.181.7.*
M) F5 }4 u- t9 ~' c2 M 17、度过新站考察期121.14.89.*18、百度抓取首页的专用IP，网站首页快照更新快，隔夜更新220.181.108.9519、百度的权重IP段，抓取的文章第二天放出来，权重较高220.181.108.92
3 y$ j( p9 N, X6 M8 h 20、综合性权重IP，抓取文章和首页，权重较高 220.181.108.91220.181.108.7521、抓取内页收录的，但权重较低123.125.71.95123.125.71.97123.181.108.77
" P# s# w2 S7 H( ? 123.125.71.10622、抓取网站首页的，也属于权重段，权重较高220.181.108.89220.181.108.94220.181.108.97220.181.108.80220.181.108.77。
% v# W) A! ~! P" { 220.181.108.83220.181.108.86以上就是小小课堂网带来的百度搜索引擎蜘蛛分析教程感谢您的观看石家庄seo培训原创观看更多seo教程搜索小小课堂喜欢记得，点赞，打赏哦小小课堂网，每天一个SEO原创视频和图文教程，别忘了关注哦。 6 I+ m( C' R* [4 ? B# Q
# k- W+ X! \4 r y! K: W7 z! f
3 _8 R& I* u( l- A
8 A/ ? F# U7 a! j, N9 V
4 w/ T( Y1 M6 l | 
