Linux内核邮件列表管理员指出,AI爬虫占用了14个CPU核心用于渲染commit页面,其消耗的资源甚至超过了所有合法访问的总和。讽刺的是,LLM本可以直接克隆git仓库获取数据,却选择抓取HTML页面,给kernel.org造成了不必要的负担。
背景
kernel.org作为Linux内核开发的中心托管平台,承载着git仓库和LKML邮件列表归档。随着AI数据爬取的兴起,这已成为全球开源基础设施维护者日益关注的问题。
- 来源
- Lobsters
- 发布时间
- 2026年8月30日 00:25
- 评分
- 7.0 / 10