文章介绍了Anubis系统，这是一种采用Hashcash风格的工作量证明机制，旨在保护网站免受AI公司大规模爬取数据的影响。该系统作为临时解决方案，同时开发更复杂的浏览器指纹识别技术来区分合法用户和自动化爬虫。Anubis需要JavaScript支持，反映了应对AI公司改变网络抓取规则的现实需求。
背景
AI公司大规模爬取网页内容导致服务器压力增大和网站宕机，促使网站运营商开发各种反爬虫措施，在可访问性和防止自动化数据收集之间寻求平衡。
- 来源
- Lobsters
- 发布时间
- 2026年3月28日 02:38
- 评分
- 5.0 / 10