Linux内核开发者指恶意爬虫消耗CPU

发生了什么

Simon Willison报道，Linux内核开发者Konstantin Ryabitsev指出，恶意爬虫造成的“背景辐射”严重消耗服务器资源。git.kernel.org上用于向爬虫渲染提交的CPU周期超过所有其他合法访问（包括git克隆）的总和。任何时刻都有14个CPU核心仅用于此目的，引发对数据集服务可持续性的担忧。