|
企业在做SEO的会接触到链接这部分内容，在SEO界链接基本分为内链、外链（友情链接）、反链、死链四大类。很多人认为只有页面不存在（404页面）的才称为死链，其实并不是这样的。死链是指已经无法到达的链接，也称作无效连接。死链不仅影响了用户体验，也影响了搜索效果。
# P, C- p& t+ P; C本文小易将给大家分享下死链对网站的影响：死链是如何产生的，如何发现死链，如何正确的处理死链！1 `( `5 Q- R7 w5 @$ h8 C/ V& P
9 w3 v& p, H, K! Q- g一、大量死链对搜索引擎的影响 + p: d3 i( U. w! V8 t+ i2 k4 v
: m% Q9 r6 c2 [4 k! Q) k9 M% @1、死链率过高，会影响搜索引擎对网站的评分。
: g( `" X2 `) k Y 2、搜索引擎对每个网站每天抓取的频次是限额的，若网站存在大量死链，会浪费掉抓取配额并影响其他正常页面的抓取。 3、过多死链对网站用户来讲也是体验不好的表现。 # Q& O3 D; y2 r! e& B& C$ F
7 Q, f' {, O5 B9 ?3 M, I Z
二、死链接是如何产生的?
; h* E! d3 t9 c1 }8 v7 {, G0 K2 ?
) g, a4 r" W0 P0 i: i& ? G6 g
1、网站内部添加了错误的内部链接 / ]( U, }4 ?$ g5 ^; U5 P/ S7 j( U
/ s5 j% |1 Z3 {/ @2 r7 R- {
编辑失误或者程序员大意让页面产生了不存在的页面。" M1 S7 V' ~8 n L @
9 C5 L( a( D G) s: S
; D' }/ y- t, M N. M# g
2、网站短暂无法访问
( y* k# I+ Y7 A# l% U$ Z0 @0 w1 G9 c( N6 h( ~0 |# Q( v' f
因为服务器、空间或程序问题导致网站短暂无法访问，产生大量返回码为5开头的服务器错误页面。$ t* P9 ?1 v9 U1 t/ q
. s8 ]( P1 ?+ D+ _$ v& } M/ S0 \/ b, b: s! D7 b2 ?1 q9 |" H9 [
3、外部链接错误 " x) B7 U9 v. k! l- e" l& d
5 o' _) p* _: N$ J4 y: W用户或者站长在站外发布了错误URL；别的网站复制或采集了你们含有错误链接的页面。
) p; U* k/ s \ h; D
, _, T _* Y) o2 I' Z) V5 {) B5 @
! _9 ]3 i6 m) C4、爬虫提取了不完整的URL 5 s4 D- y$ C8 u2 j$ E% v$ h9 `/ y
% Q* Q7 P) V" H9 i% C
个别爬虫在提取页面URL的时候，因为URL中有不规则字符或者URL与后边的文字链接起来，导致URL失效。, n7 W& n, `: ~0 @1 R+ \, u8 r. g
$ t8 r3 f: _% F4 M9 @" t `2 U" j0 R$ x) |: S
5、网站改版
: i9 G% D' H g' _, P% i8 _" ^ Y9 J* o4 z& P# X; c
如果你的网站已经改版或者将要改版，一定要注意死链问题，很多网站改版后，之前的老页面直接删除，导致了大量的死链接。
4 t! E# `; t* A" [" M7 b 5 _: r: E9 R+ i1 n" l/ J! z! I
6 j" \# m8 A' o; F% c
6、管理员删除页面
& w$ `% V; k+ \. c
2 v" v6 A% M* u* S# J( `网站管理员删除被黑、广告、过时、被灌水页面导致很多死链接。
, d; {3 m% i$ e" z# t三、如何发现网站中存在的死链接？ 7 S# s2 ~$ K: @
$ Y% {5 I' ?+ z. Q- \$ B: M9 [6 J1、站长工具中的抓取异常工具可以查看最近一个月产生的各种死链，并支持导出功能。
; J4 y* T* n6 C7 C1 {2、使用相关爬虫软件，比如Xenu，此类工具可以爬取全站所有链接并分析页面状态，分析完成后，支持导出功能，提取死链接即可。 7 R. V1 R' U3 m) k) T
3、在网站运营中，特别是论坛，经常需要删除某些页面，在删除页面时一定要记录对应的Url以便后期提交死链。
0 x3 F( a; E# c; B通过上述两种办法提取的死链列表，一定要经过删重和验证，比如用wps表格进行删除重复链接，然后再使用Http状态批量查询工具验证下是否确实是死链接。 2 e3 ~! T7 ^7 n: b7 s0 v/ c
q) u$ b: I( F8 T/ E6 J四、如何避免和处理死链接？
" s7 y) t v$ k- W! P& C# Y! `, K8 z# h
1、网站改版最容易产生死链的
8 j3 _ Y: X6 R& n
& X! A$ @" R8 d) S8 D; N( \7 C+ m
改版之前的页面如果有价值尽量不要删除和修改Url，若需要更换域名或Url分配规则，那一定要将之前的url进行301跳转到对应的Url；若老的数据必须删除，那删除的所有页面Url要进行整理和提交死链。
2 O- y- R; R k2 I( n2、对发现的死链接如何处理 # z7 e" u7 ]8 ~+ C4 d
将收集好的所有死链接粘贴到网站根目录的一个文档中，再把文档地址提交到 站长工具--网页抓取--死链提交--添加新数据--填写死链文件地址；若大量死链具有一定的规则，如某个目录下全部为死链接，可提交规则死链。 3 E$ l+ x) ]1 B4 R
" ]- `, g- B4 t" B
相关注意事项 / I9 U. ~3 l& z" B
2 q* {- U- m" J+ e4 }3 V
1、在站长工具中提交死链前，一定要确保提交的死链数据不存在活链接。一旦存在活链，会显示提交失败导致无法删除。
* V$ d; {' @1 |4 m" e2、由于很多网站程序问题，很多打不开的页面返回码并非404，这是一个大问题，比如明明是打不开的页面返回码是301、200、500，如果是200的话，会导致网站中出现不同URL获取相同内容。比如我的一个站，社区的帖子删除后，返回码却是500，后期发现了，立马进行了处理。大家尽量找出所有错误URL格式，并设置HTTP状态码为404。 0 X* C8 {, r4 H: a
3、把所有的错误页面找到后，一定要寻找此类页面URL相同特征，并且和正常页面的特征有区分，写对应规则到robots文件中，禁止蜘蛛抓取，就算你已经在站长工具中提交了死链，也建议robots封禁抓取。 7 D/ {" V, p+ B5 k' P; W+ T# ~2 P
4、robots只能解决蜘蛛不再抓取此类页面，但解决不了已经收录页面的快照删除问题，若你的网站被黑，删除了被黑页面，除了robots封禁被黑页面外，还应该将这些页面提交死链。提交死链是删除被黑页面快照的最快办法。
0 r. o: D, ], T. r5 T% [# n( J' r& `7 ~" t# H
| 
我是来坐沙发的！
