E-Ink 新闻日报

返回列表

恐怖的爬虫:AI爬取对Linux内核基础设施的影响

Linux内核邮件列表管理员指出,AI爬虫占用了14个CPU核心用于渲染commit页面,其消耗的资源甚至超过了所有合法访问的总和。讽刺的是,LLM本可以直接克隆git仓库获取数据,却选择抓取HTML页面,给kernel.org造成了不必要的负担。

背景

kernel.org作为Linux内核开发的中心托管平台,承载着git仓库和LKML邮件列表归档。随着AI数据爬取的兴起,这已成为全球开源基础设施维护者日益关注的问题。

来源
Lobsters
发布时间
2026年8月30日 00:25
评分
7.0 / 10