Anubis 启用工作量证明机制，为网站抵御 AI 爬虫侵袭

【导语为防止 AI 公司大量爬取网站内容导致崩溃网站管理员启用 Anubis 保护服务器。它采用工作量证明机制增加爬取难度后续还将投入指纹识别等技术。】Anubis 登场抵御 AI 爬虫保护网站网站管理员启用 Anubis 来保护服务器原因是 AI 公司大量爬取网站内容的行为可能导致网站崩溃影响所有用户正常访问资源。工作量证明机制增加爬虫成本Anubis 采用类似 Hashcash 的工作量证明机制该机制最初用于减少垃圾邮件。对单个用户而言额外计算负担微不足道但对于大规模爬虫累积成本大幅增加从而增加了爬取难度。后续技术规划指纹与无头浏览器识别目前 Anubis 只是过渡性方案后续会投入更多时间用于指纹识别和无头浏览器识别例如通过字体渲染方式这样就无需向更可能是合法用户的人展示工作量证明挑战页面。使用限制与开发方向Anubis 需要使用现代 JavaScript 功能JShelter 这类插件可能会阻止这些功能需为该域名停用。同时由于 AI 公司改变了网站托管的社会契约必须启用 JavaScript 才能通过验证无需 JavaScript 的解决方案仍在开发中。编辑观点Anubis 的出现为网站抵御 AI 爬虫提供了有效手段虽有使用限制但后续技术规划值得期待有望更好平衡安全与用户体验。