百度蜘蛛抓取网页的一些分析
"第一，要想排名靠前，目标关键词应该完整匹配地出现在页面中。比如说，你想让你的网站在用户搜索”电脑学习”时出现在前面，那么在你的网页上，”电脑学习”这四个字应该完整连续的出现，而不能”电脑”出现在第一段，”学习”出现在第二段。第二，我注意了一下蜘蛛似乎更注重页面内的因素。与Google更加重视内部，有点爬虫类的味道，越黑越深，它越是喜欢往里钻，--不相信你做100个页面，做得再漂亮，只要链接没有层次，哈哈，不好意思，你最多就孤零零的被收录可怜的一点点东西。我前两个站开通不到一个月，也很少有外部链接。但因为本身的结构是比较有层次，一些竞争不太激烈的关键词在百度的排名还不错。
第三：百度蜘蛛极为活跃,经常看看你的服务器日志，你就怀发现百度蜘蛛抓取的频率和数量都非常大。百度蜘蛛几乎每天都会访问我的论坛，并且至少抓取几十个网页。我的论坛只开通了不到一个月，网页数目还没有完善，但是百度蜘蛛的活动已经相当可观了。大量捕获是百度的强项，其他任何搜索引擎都没办法相比。但是百度中文网页数目并不是最大的，百度蜘蛛抓取的频率和网页更新情况有关。
第四：充分利用百度的一个最大的优势--大家可能觉得它的优势对我们来说就是难事了嘛：呵呵，的确是可以利用的，百度收录速度可以用海量来形容，正因为速度快，就给我们留下了可以利用的空间!
第五：百度并不被所谓的优化迷惑!!GG对优化好象www.ljbylc357.com远远没有百度敏感，百度尤其反感所谓的优化，不知道是用什么方法识别----我的看法是目前最”先进“ 的优化方法，好象对百度没什么大的作用，大家都这么干了，机器人是有点死脑筋，但是百度那些IT也不是吃白饭的哈，要知道他是全球最先进的中文搜索老大，，GG在中文搜索这快--哈哈，不用说了吧：)
第六：百度排名算法是以网页为基础，比较少关注整个网站的主题。联系到上一点，这说明百度排名算法中比较注重内部结构缺少完整的语义分析。所以一些目前比较认同的关于site：之间那几个所谓关系到搜索质量的东西，并不是百度蜘蛛所最敏感的。"
这个分享太实用了，刚好能用到，感谢楼主！
页:
[1]