OpenWrt 官网部署 Anubis 防御系统：严厉打击 AI 激进爬虫行为

核心要点

• 部署 Anubis 系统：OpenWrt 官网引入 Anubis 保护机制，专门对抗 AI 公司的激进抓取行为。
• 工作量证明机制：采用类似 Hashcash 的 PoW 方案，增加大规模自动化抓取的经济和计算成本。
• 保护服务器稳定性：防止因高强度爬虫导致的服务器宕机，确保合法用户能够正常访问资源。
• 技术访问要求：用户需启用现代 JavaScript 功能以通过挑战，目前暂不支持无 JS 的解决方案。

详细分析

AI 抓取对网站生态的冲击

根据原文信息，AI 公司激进的网页抓取行为已经从根本上改变了网站托管的“社交契约”。这种高频率、无节制的抓取不仅消耗了大量的服务器带宽和计算资源，还经常导致网站出现宕机（Downtime），使得普通用户无法正常获取所需信息。OpenWrt 官网部署 Anubis 系统正是对这种失衡现状的直接回应，旨在重新夺回对服务器资源的控制权。

Anubis 系统的技术实现与逻辑

Anubis 系统借鉴了 Hashcash 的思路，利用工作量证明（Proof-of-Work）方案来筛选访问者。对于个体用户而言，这种额外的计算负载几乎可以忽略不计，不会影响正常浏览体验；但对于需要进行大规模、高并发抓取的爬虫程序，这种计算成本会迅速累积，从而使其抓取行为在经济上变得不可持续。此外，该系统未来还计划引入浏览器指纹识别技术（如字体渲染分析），以更精准地识别无头浏览器，减少对合法用户的干扰。

访问门槛与兼容性挑战

目前，Anubis 系统要求用户必须启用现代 JavaScript 功能，这意味着像 JShelter 这样的隐私保护插件可能会导致无法通过验证。虽然官方表示正在开发无需 JavaScript 的替代方案，但现阶段为了应对 AI 爬虫的威胁，不得不牺牲了一部分极端隐私保护环境下的兼容性。这反映了网站在安全防御与用户便利性之间面临的艰难权衡。

行业影响

此举标志着开源社区和内容提供商开始采取更具攻击性的技术手段来抵御未经授权的 AI 训练数据采集。随着 AI 模型对高质量数据需求的增加，网站方与 AI 巨头之间的博弈正在升级。OpenWrt 的做法可能会引发更多技术类网站的效仿，推动反爬虫技术从简单的 IP 封禁向更复杂的计算成本挑战演进，进而重塑互联网数据的获取规则。

常见问题

问题 1：为什么访问 OpenWrt 页面时会看到 Anubis 挑战页面？

这是因为网站管理员为了防止 AI 公司过度抓取数据而设置的保护层。它通过要求浏览器完成一项小型的计算任务（PoW）来证明访问者不是恶意爬虫。

问题 2：为什么必须开启 JavaScript 才能访问？

目前的 Anubis 防御机制依赖现代 JavaScript 功能来执行验证逻辑。如果禁用了脚本或使用了拦截插件，系统将无法确认访问者的合法性，从而导致页面无法加载。

问题 3：这种机制会影响普通用户的访问速度吗？

对于普通用户，Anubis 产生的额外计算负载非常小，通常不会察觉到明显的延迟。它的设计初衷是只针对那些试图进行大规模自动化抓取的行为增加成本。