|
企业在做SEO的会接触到链接这部分内容,在SEO界链接基本分为内链、外链(友情链接)、反链、死链四大类。很多人认为只有页面不存在(404页面)的才称为死链,其实并不是这样的。死链是指已经无法到达的链接,也称作无效连接。死链不仅影响了用户体验,也影响了搜索效果。 # Z) u/ U" H) s( e* ~2 a
5 Z W5 F3 s+ s3 w4 Y' ~
本文将给大家分享下死链对网站的影响:死链是如何产生的,如何发现死链,如何正确的处理死链!
( d$ W7 D6 a) x
- ?* A2 P% r& w9 K
* ^- Z) e1 \! X0 \1 E- R6 A7 X
* s! O4 S; s. ~5 }& @# I 一、大量死链对搜索引擎的影响 8 ~+ a, v, U" d% C1 C
/ z5 c3 r; G! T3 q% a( c
1、死链率过高,会影响搜索引擎对网站的评分。
% H: M6 p4 H7 ?3 V$ D 2、搜索引擎对每个网站每天抓取的频次是限额的,若网站存在大量死链,会浪费掉抓取配额并影响其他正常页面的抓取。 3、过多死链对网站用户来讲也是体验不好的表现。
. t# {; x% g1 [3 ~, k, L
( q" P: Y' l8 u1 ]+ _
二、死链接是如何产生的? % `5 v5 L j6 ~% y& N
% ]1 i% W# z0 o. ^! S
+ k: M& q+ A1 V
1、网站内部添加了错误的内部链接
/ T" \4 S5 z9 G* V# n$ C+ A, e
$ e- _5 _! C4 V/ ?
编辑失误或者程序员大意让页面产生了不存在的页面。4 Z) ^$ E- f9 ~4 C- W7 a. q5 ]) `
6 u+ B9 y& L# P& u W( _( W
& j! l2 V- B7 `9 i! z% b1 o2 h6 r" _
2、网站短暂无法访问 . V: d0 k7 X t# c! x7 `0 Q) V+ q
7 j7 G$ U# r# n
因为服务器、空间或程序问题导致网站短暂无法访问,产生大量返回码为5开头的服务器错误页面。5 u+ g5 ?8 h+ T, C* ]$ o3 m1 Q9 ?
' j+ j/ d V) y1 [
7 d; i) O# Q; o" }
3、外部链接错误
5 k: J; T! T. Z8 ^
m1 L, d r7 I. v0 t" ^( g2 e
用户或者站长在站外发布了错误URL;别的网站复制或采集了你们含有错误链接的页面。: Z) } L( ]! H! y" q) K6 ]
2 ? x p) [8 J. v" L# d9 @1 a
5 L, b) p. n$ Q& p6 A
4、爬虫提取了不完整的URL ' e5 V% n9 R. h& p B+ d4 i
- {. Y+ O" \" U5 {, ?
个别爬虫在提取页面URL的时候,因为URL中有不规则字符或者URL与后边的文字链接起来,导致URL失效。# s4 P, x: K9 k. P2 C8 @, k+ n
% m7 l* Y& |" O, n, h! _2 ]
0 `# Z% f! Y2 F
5、网站改版
0 q6 I+ C: B3 g/ S. d q; _8 k
$ K& x& N2 f4 e8 ]
如果你的网站已经改版或者将要改版,一定要注意死链问题,很多网站改版后,之前的老页面直接删除,导致了大量的死链接。
6 E0 h+ H& N9 B! i# w 9 j' O' A* K6 x/ L$ |; Y
Q/ J+ u+ a6 y# G
6、管理员删除页面 - n, U6 | r# R; |" w5 [* |8 @% }
1 [# n9 u6 h4 m) X; H: {) O
网站管理员删除被黑、广告、过时、被灌水页面导致很多死链接。
# s6 s& I) h8 w 6 G0 G! Z* O' m8 v# A+ Q3 g
4 t! Y; R, F. {0 O- D( n: J
三、如何发现网站中存在的死链接? 5 B4 |; w' @9 Q* n" A
2 Q9 \* R( O( U# d. n" l0 `
1、站长工具中的抓取异常工具可以查看最近一个月产生的各种死链,并支持导出功能。
9 D/ T# X5 z6 c7 q- G; e" J
2、使用相关爬虫软件,比如Xenu,此类工具可以爬取全站所有链接并分析页面状态,分析完成后,支持导出功能,提取死链接即可。 $ z0 c. z: I9 W* x3 ^! M
3、在网站运营中,特别是论坛,经常需要删除某些页面,在删除页面时一定要记录对应的Url以便后期提交死链。 % S; {7 M) g! D
通过上述两种办法提取的死链列表,一定要经过删重和验证,比如用wps表格进行删除重复链接,然后再使用Http状态批量查询工具验证下是否确实是死链接。
4 a6 B/ c( `: x- R+ U1 L
: W2 u# y/ T' P) ?! u5 q* r
四、如何避免和处理死链接? 5 j; `4 S6 v9 W6 Z/ I: ]. q+ |
# ?' o- w. V* c( @# X {- m+ i+ h- V
1、网站改版最容易产生死链的/ V7 U; b! _. `% B! o n& }
! G( k: w' p+ y
改版之前的页面如果有价值尽量不要删除和修改Url,若需要更换域名或Url分配规则,那一定要将之前的url进行301跳转到对应的Url;若老的数据必须删除,那删除的所有页面Url要进行整理和提交死链。 4 W& Y6 P& ^. s' s, H" Y: F
2、对发现的死链接如何处理
: q6 K' D6 P$ w; f( q) Z
将收集好的所有死链接粘贴到网站根目录的一个文档中,再把文档地址提交到 站长工具--网页抓取--死链提交--添加新数据--填写死链文件地址;若大量死链具有一定的规则,如某个目录下全部为死链接,可提交规则死链。 : h# U& r: P; Q z: \
1 {2 a9 e u; I- G2 B
相关注意事项
c" r3 s1 X. O7 @( E8 D
7 r% F9 Z( g' n( v+ Z
1、在站长工具中提交死链前,一定要确保提交的死链数据不存在活链接。一旦存在活链,会显示提交失败导致无法删除。 4 D- H; v9 U, H* r$ }$ O9 g6 a
2、由于很多网站程序问题,很多打不开的页面返回码并非404,这是一个大问题,比如明明是打不开的页面返回码是301、200、500,如果是200的话,会导致网站中出现不同URL获取相同内容。比如我的一个站,社区的帖子删除后,返回码却是500,后期发现了,立马进行了处理。大家尽量找出所有错误URL格式,并设置HTTP状态码为404。 8 E* _8 h& L& D D; f
3、把所有的错误页面找到后,一定要寻找此类页面URL相同特征,并且和正常页面的特征有区分,写对应规则到robots文件中,禁止蜘蛛抓取,就算你已经在站长工具中提交了死链,也建议robots封禁抓取。
7 h+ H; u3 j5 A% ?, T
4、robots只能解决蜘蛛不再抓取此类页面,但解决不了已经收录页面的快照删除问题,若你的网站被黑,删除了被黑页面,除了robots封禁被黑页面外,还应该将这些页面提交死链。提交死链是删除被黑页面快照的最快办法。
) J) H r a9 a7 Q9 I; Y; C6 K |