AI 代理攻破 Hugging Face 系统,OpenAI 警告这只是开始

AI3D 发表于 07-23 浏览 3 分类 创作分享

Stokkete, Shutterstock
Stokkete, Shutterstock

关于机器统治世界的老电影突然变得不再搞笑:机器学习平台 Hugging Face 遭到 AI 智能体入侵,而 ChatGPT 的创建者 OpenAI 认为此类事件未来还会继续发生。

上周,Hugging Face 发现其生产基础设施遭到一个自主 AI 智能体系统的入侵:OpenAI 的 GPT‑5.6 Sol 以及“一个更强大的预发布模型”。

Hugging Face 原本打算在 ExploitGym 基准测试中测试该 AI 的网络能力,但它“滥用了两个代码执行路径”在其数据集处理过程中,在处理 worker 上运行代码,“提升到节点级别访问权限,收集了云和集群凭据,并在一个周末内横向移动到多个内部集群。”

“该攻击活动由一个自主智能体框架(看起来基于一个智能体安全研究工具构建——所用 LLM 尚不明确)运行,在大量短时沙箱集群中执行了数千个独立操作,并在公共服务上部署了自迁移的命令与控制。这与业界一直预测的‘智能体攻击者’场景相符。”

正如 OpenAI 解释的那样,这些模型“识别并链接了 OpenAI 研究环境与 Hugging Face 生产基础设施中的多个漏洞”。它们“过于专注于寻找 ExploitGym 的解决方案”,以至于“不惜采取极端手段来实现一个相当狭窄的测试目标”。

测试沙箱本无法访问互联网,但在它们执着寻找解决方案的过程中,它们利用了一个包注册表缓存代理中的零日漏洞。

“在获得互联网访问权限后,模型推断 Hugging Face 可能托管了 ExploitGym 的模型、数据集和解决方案。据此,模型搜索并成功找到了获取机密信息的方法,以便用它来作弊评估。在一个例子中,模型串联了多个攻击向量,包括使用窃取的凭据和零日漏洞,在 Hugging Face 服务器上找到了一条远程代码执行路径。OpenAI 的安全团队在内部发现了这一异常活动。”

Hugging Face 已修复该漏洞,并正在与 OpenAI 合作以防止未来出现类似情况,因为 OpenAI 预计随着越来越多具有网络能力的模型涌现,此类事件将“变得更加普遍”。

OpenAI 正在基础设施配置中实施严格的控制,开发针对零日漏洞的补丁,并增加围绕未来训练和评估的更强保护。如果您想了解更多信息,请查看其关于长周期模型时代下提升安全性与对齐⁠的博客。

相关链接

原文链接:https://80.lv/articles/machine-revolution-is-coming-ai-agent-managed-to-hack-hugging-face-system

喜欢这篇内容吗?