过去 9 年中，指向网站的外链至少有 66.5% 已失效（Ahrefs 关于链接腐烂的研究）

链接腐烂（link rot）指链接不再指向它们本应指向的文件、网页或服务器，这些链接已经失效。随着互联网上的页面被删除、重定向或更新，页面上的链接就会指向失效页面或内容已被篡改的页面，链接腐烂由此发生。

自 2013 年 1 月以来，指向我们抽样的 2,062,173 个网站的链接中有 66.5% 已经腐烂失效。我们还发现另外 6.45% 存在临时错误，无从判断它们是否仍然有效。

放到 SEO 领域，情况就更加复杂。另有 1.55% 的链接存在其他问题，导致它们无法被计入排名。

这意味着，在我们的研究中，总共有 74.5% 的链接被视为失效，其中至少 66.5% 属于腐烂失效。

很多时候，这些失效的链接很重要。看看这个例子：一个曾在美国最高法院案件中被引用的网站，后来有人买下了该域名，并利用它来表达某种观点。

在 2014 年一项针对法律期刊及其引用的既往研究中，期刊内 70% 的链接和美国最高法院判决中 50% 的网址，都已无法找到最初被引用的内容。

另一项 2012 年的研究发现，30% 的社交媒体链接在两年内就失效了。

以往的研究大多规模较小，而且涵盖的是互联网中较老的部分。我推测，更古老的网络内容中有更多已经消失，甚至可能大部分都已不见。例如，许多网站多年前就不再在网址中使用 .html 之类的扩展名，转而采用简洁网址；大多数网站也已从 HTTP 迁移到 HTTPS。基于以上考虑，我们决定开展史上规模最大的一次链接腐烂研究，它也是少有的覆盖较新版本网络的研究。

下面深入看看数据。

数据说明

Ahrefs 自 2010 年起就在抓取网络。但就本研究而言，我们只看 2013 年 1 月以来的数据。

可以使用 Ahrefs Site Explorer 中的 Backlinks（外链）报告查看自己网站的数据。以 Ahrefs 为例，1.743 亿条链接中有 2690 万条已经失效，只需把应用“Lost（失效）”筛选器后的数字与“All（全部）”筛选器后的数字对比即可。

有几类被我们标记为“失效”的情况，我们并不计入链接腐烂，我将在下文说明。

正如我在开头提到的，在过去九年中，指向抽样网站的外链至少有 66.5% 已经腐烂失效。

链接失效的原因有很多。在 Ahrefs，我们把失效链接分成不同类别。以下是链接失效最常见的原因：

• 已掉线（Dropped，47.7%）
• 链接被移除（34.2%）
• 抓取错误（6.45%）
• 301/302（5.99%）
• 未找到（4.11%）
• 非规范（Not canonical，0.82%）
• Noindex（0.73%）
• 重定向损坏（0%）

下面逐一看看这些情况及其成因。

47.7% 的链接来自已掉线的页面

页面掉线可能是因为它们无法被抓取或索引。某些情况下，域名可能已经不存在了。

34.2% 的链接被移除

这种情况下，页面仍然存在，只是不再链接到你。

可能是某人在内容更新时移除了链接、用另一条链接替换了你的链接，或者出于公司政策而删除了链接。还有一种可能：竞争对手决定不再链接到你。

6.45% 的失效链接来自抓取错误

如果页面在下次被抓取时可以访问，且链接仍然存在，它就会被计为有效。如果该页面持续“报错”，我们就可能把它从索引中剔除。我们选择不把抓取错误计入链接腐烂的总数。这些链接中很可能有一部分已经不存在，但另一部分仍然有效。

5.99% 的链接因页面被重定向而失效

页面会因为各种原因改变位置，常见原因是某种网站迁移。

4.11% 的链接指向未找到的页面

偶尔，这些页面可能会重新上线或被重定向；在这种情况下，它们会被重新计入，或被归入重定向类别。

0.82% 的链接因所在页面不再是规范页面而失效

链接所在页面带有指向其他位置的 “rel=canonical” 标签。这可能源于从 HTTP 迁移到 HTTPS，或涉及末尾斜杠或参数的某种标准化处理。这通常无需担心。页面只是在改变自己希望被索引的方式，这些链接只是从一个页面转移到了另一个页面。

0.73% 的链接因所在页面被标记为“noindex”而失效

我们在链接腐烂的数字中没有计入被标记为 noindex 的页面。这条链接从技术上讲仍然存在，但所在页面不会出现在搜索引擎中，也不会传递任何权重。

少量链接因重定向损坏而失效

这种情况下，我们之前看到的是多重重定向链。现在其中某一环重定向损坏了，链接因此与目标之间形成了某种意义上的断连。

出现这种情况的原因包括：

• 重定向链断裂 —— 如果重定向链中的任一页面无法响应，它就会被报告为失效链接。
• 重定向不再存在（或已改变） —— 假设你有一条从站点 A → 站点 B 的链接，但这条链接最初经过一个或多个其他网址的重定向（例如 站点 A → 站点 C → 站点 B）。如果发起链接的网站把这条链接改成直接链接（而不是经过重定向链），它就会被报告为失效链接。如果重定向的最终网址被改为跳转到别处，情况也一样。

你能为链接腐烂做些什么？

你获得的许多链接可能会随时间推移而失效。有一种办法有可能帮你找回其中一部分，那就是链接回收（link reclamation）。

很多情况下，你的旧网址会带有来自其他网站的链接。如果这些网址没有被重定向到当前页面，那么这些链接就会失效，不再为你的页面计入权重。现在做这些重定向还不算晚，你可以迅速找回流失的价值。可以把这看作你做过的最快的链接建设。

下面介绍如何找到这些机会：

• 把你的域名粘贴到 Site Explorer（在 Ahrefs Webmaster Tools 中也可免费使用）
• 打开 Best by links 报告
• 添加一个 “404 not found” 的 HTTP 响应筛选条件

我通常会按“Referring domains（引用域名）”排序。

甚至可以反过来利用链接腐烂。断链建设（broken link building）是一种策略：找出所在领域里已经不存在的资源，然后联系网站主，告诉他们你有一份资源可以替代那条断链。

想知道如何为自己的网站做这件事？我们的内容负责人 Joshua Hardwick 准备了一份流程化的断链建设指南。

另一种应对链接腐烂的方法，是修复你自己网站上的断链。你可以在 Site Audit 的 Links 报告中轻松找出它们，只需删除这些链接，或把引用更新为一个确实存在的相关页面即可。

你可能还想修复自己网站上指向其他网站的断链。从 SEO 角度很难为这件事找到充分理由，一般来说我会把它视为一项优先级较低的网站健康与维护任务。

结语

一些公司和技术曾尝试应对链接腐烂。这类方案很多其实并没有真正解决断链或网络不断变化的问题，而是依赖对网络内容的归档，让它们仍能被看到。例如，Internet Archive 有一个 Chrome 扩展，页面失效时会显示该页面的存档版本。

同样，CDN 服务商 Cloudflare 有一个 Always Online 功能：它会先查找自己对某一离线页面的存档副本，如果不存在，就会从 Internet Archive 拉取最新版本。

如果你使用 Brave 浏览器，遇到失效页面时会看到一条提示，让你去 archive.org 查看其存档版本。

美国国会图书馆法律图书馆为法律研究报告中的链接与引用腐烂问题，实施了一套外部归档方案。

一如既往，如有任何问题，欢迎在 Twitter 上给我留言。