找回密码
 加入怎通
查看: 848|回复: 5

[站长八卦] 搜索引擎蜘蛛爬行规律探秘之二外链是否有时效性

[复制链接]
TONY 发表于 2012-01-02 17:51:36 | 显示全部楼层 |阅读模式
首先,外链所在页面被删除了,外链是否有效?# f7 P4 T. R+ \3 O
答案外链所在页面删除了依然是有效。证据如下:
5 m' W$ u" a" X$ n! v我在博客中国的博客(可能是因为流量超标在2006年被删除了)早就已经被删了,但是百度依然有快照。今天看了下首页的快照已经没有了5 a5 S! {' m% L2 z( G
,但是文章页面还存在。看快照日期可以看到是2006年,甚至更久的。+ c) M' m# O' Q7 p+ a& ]
也就是虽然页面被删除了有5年之久,但是百度的快照没有删除,那么你说这里面的链接蜘蛛会不会爬呢?
5 c/ Z: `3 S* P. P! b* L+ b我感觉应该是会爬的,而且我在博客网的这个博客是有一个域名A的链接的,当时只是做了个跳转到博客首页。后来在我启用域名A做博客的2 N1 S& i$ b) T, y' g
时候,立马就获得了一个很好的权重,而且文章很容易被秒收。相信这个5年前的链接起到了不少的作用。3 N6 g8 b5 u: _- S2 O
第二,如果外链所在页面搜索引擎没有了快照,外链是否有效呢?1 D1 [! X( B7 B8 U" N
答案可能会出乎很多人的意料,外链所在页面没有了快照依然还可以有效。原因可以查看我在蜘蛛如何抓取链接这篇文章里写的,蜘蛛抓取5 ~, r: G, A, X4 H
页面之后,会把内容和链接分开,链接也就是URL会加入一个网址索引库,而蜘蛛爬行是从这个网址索引库出发的。3 l2 b1 J5 z# ^
先看证据,这个证据来自于谷歌站长工具:
# u& c* L6 |+ |/ G- _; b) V1 A( p这个截屏来自于Google站长工具故障诊断的404报告,以前我在原网站下面架设了个bbs,当然早在N年前已经删除了。可是这个不存在的页面
/ x" G" _. j2 P+ J8 D7 A,被Google蜘蛛抓取的来源地址竟然也是不存在的页面。而用Google搜索,是没有这些页面的快照的(如下图)。那是不是意味着已经404了
. b/ X4 x- t9 C5 b1 f5 l很久的页面上的导出链接依然有效?; C% w% y3 ~, _
第三,那么外链对于搜索引擎是否有时效性呢?
+ t7 b# u# G% z1 i4 s7 Z9 R很明显应该是有时效性的。那么我就猜测一下外链失效的原因吧,应该会有两个原因:那就是外链所在页面被删或者链接被删。
# J7 {# g7 N7 Y$ D4 X- ]+ t7 _1.针对页面被删的情况,搜索引擎应该会继续爬行这个页面上的外链,直到这个页面404一定时间后,会给搜索引擎网址索引库一个命令删除
5 ]8 i0 ?  X3 w, V+ Y0 G这个外链。
; X* i2 @: m  e- @- P2.而对于页面更改的情况,搜索引擎应该也会爬行这个外链,直到这个含有这个外链快照在搜索引擎内部彻底删除,会给网址索引库一个命* ]! R' Y9 W7 z. d7 d
令删除这个外链。因为含有外链的页面根据情况会保存N个时期的快照,这就是为什么有时候搜不同的词,网页的快照不同。6 Q' u9 o5 H  ?# H) N
总之,外链是有时效性,但是链接修改或者页面被删除并不代表无效了。当然搜索引擎内部会有一个复杂的计算,过程不会像我说的这么简8 T4 E$ B; n& w3 x8 Q; O1 `
单。如果有什么不同意见请直接在本文下面留言,大家互相讨论。
& k3 I$ L% o0 z8 U% n- g( y本文出自   http://www.jjcjm.com  深圳二次加工机  转载请注明出处, P5 ^' u& Q+ l8 e4 l/ `) ?

5 Z0 N: P  o; B  h( B" u+ W! ]

暂时无法加载帖子列表

回复

使用道具 举报

西万路小混混 发表于 2026-06-01 12:00:03 | 显示全部楼层
完全赞同,我也是这么认为的,英雄所见略同~
回复

使用道具 举报

金泽教育 发表于 2026-09-13 17:53:04 | 显示全部楼层
楼主太厉害了,整理得这么详细,必须支持
回复

使用道具 举报

花开.彼岸 发表于 2026-10-07 21:53:54 | 显示全部楼层
分析得很透彻,很多细节都说到点子上了~
回复

使用道具 举报

六六 发表于 2026-10-08 12:00:08 | 显示全部楼层
楼主辛苦了,整理这么多内容,必须点赞收藏
回复

使用道具 举报

18335556081 发表于 2026-10-14 19:18:56 | 显示全部楼层
蹲了这么久,终于看到有价值的讨论,支持一下!
回复

使用道具 举报

    您需要登录后才可以回帖 登录 | 加入怎通

    本版积分规则

    QQ|手机版|小黑屋|网站地图|真牛社区 ( 苏ICP备2023040716号-2 )

    GMT+8, 2026-11-1 15:45 , Processed in 0.039430 second(s), 30 queries , Gzip On.

    免责声明:本站信息来自互联网,本站不对其内容真实性负责,如有侵权等情况请联系420897364#qq.com(把#换成@)删除。

    Powered by Discuz! X3.5

    快速回复 返回顶部 返回列表