醉过 发表于 2013-01-05 11:47:33

浅析蜘蛛与网站打开速度

1:蜘蛛本身就是模拟用户行为进行爬行读取,网站打开速度慢,影响实际用户体验的同时,肯定也同时会影响到模拟用户体验的蜘蛛。当一个网站打开速度慢的时候,蜘蛛会对这个网站的评分降低,进而影响到读取、收录等一系列行为。
  2:蜘蛛抓取页面数量=停留总时间/单个页面停留时间先不管打开速度慢蜘蛛会不会提前撤退的问题,假若蜘蛛在网站的总停留时间固定,如果页面打开时间变慢,则总停留时间除以单个页面的停留时间即蜘蛛抓取的页面数量就会变少,抓取的量变少,相应的被收录的量肯定也会变少。
  3:网站打开时间变慢之后,蜘蛛会对这个网站有抵触意识,慢慢的就会来的次数变少甚至不再来爬取。当一个网站没有蜘蛛爬取的时候,收录量变少也是理所当然的事情了。
  一个网站要想收录好,收录多,必须得到蜘蛛的青睐才行,一方面要让蜘蛛爬取频繁,一方面需要蜘蛛抓取更多的页面。当我们有很多好的原创内容,有不错的外链支撑,也就是我们打好了蜘蛛频繁爬取和抓取的地基之后,一定要回头看看我们网站的打开速度是不是会影响蜘蛛的行为。
本文来源:大棚膜http://www.shunlisuliao.com

hudunkeji123 发表于 2026-07-18 03:36:36

楼主太厉害了,整理得这么详细,必须支持

a604146297 发表于 2026-07-18 10:05:23

学习到了,之前一直没注意过这个点,受教了

leonseo444 发表于 2026-07-19 11:33:36

楼主辛苦了,整理这么多内容,必须点赞收藏

客服晓渔 发表于 2026-08-03 18:40:41

内容很干货,没有多余的废话,值得反复看

菜菜105 发表于 2026-10-17 14:40:56

蹲了这么久,终于看到有价值的讨论,支持一下!
页: [1]
查看完整版本: 浅析蜘蛛与网站打开速度