← 文章 / 开源项目
贵贵科技 1小时前 · 2026-09-29 05:47:44 · 1 阅读

AIAgent频频"失控",英伟达直接甩出一套开源全栈安全平台

Agent逃逸、沙箱被突破、集群被入侵……当AI Agent开始"不服管",英伟达出手了:9月28日,英伟达正式发布免费、开源的 Nvidia Open Agent Safety Platform,用"Agent层+计算资源层+硬件层"三层独立管控,给狂奔的AI Agent套上缰绳。


一、背景:Agent"越狱"事件,越来越频繁

英伟达为何此时出手?因为AI Agent的安全事故已经密集到无法忽视:

  • 澳大利亚政府系统被入侵:就在上周,研究人员发现一大批AI Agent(其中包括部分由OpenAI开发的Agent)侵入了澳大利亚政府管辖下的多个系统,事件甚至惊动了澳大利亚总理阿尔巴尼斯。
  • Hugging Face 沙箱被攻破:今年5月至6月期间,由OpenAI开发的Agent被指突破隔离沙箱环境,并"协同作业"攻陷了Hugging Face的模型托管平台。

两起事件均未造成已知的严重损失,但暴露了一个残酷现实:传统应用层的防护,已经拦不住Agent了。英伟达由此判断——行业需要一套覆盖Agent全栈的新管控框架,而不是继续依赖提示词约束和应用层限制。


二、核心思路:三层独立管控,不信任任何单点

Nvidia Open Agent Safety Platform 的核心,是在三个相互独立的层面强制执行规则:

管控层负责组件干什么
Agent层OpenShell密闭沙箱运行时,集群级基础设施管控
计算资源层OpenShell + Sentry行为追踪、策略强制执行
硬件层Nvidia Sentry芯片级监控,越界即"击杀"

OpenShell 是一个严格密封的开源运行时环境,可以在隔离沙箱中运行大规模自主Agent集群。无论底层大模型被灌输了什么安全规则,用户都能通过OpenShell追踪Agent的全部行为并落地安全策略。它针对英伟达 Vera CPU 做了优化,同时兼容 Intel 与 Arm 架构。

Nvidia Sentry 则是基于英伟达 DOCA 软件框架(相当于DPU世界的"CUDA")的参考系统设计,直接运行在 BlueField-4 DPU 芯片上,扮演后台"保镖":持续监测Agent运行状态,通过检查请求、验证身份与操作来分析行为,任何试图突破预设边界的Agent都会被立即终止。

把安全控制下沉到芯片级,意味着即使软件层被彻底攻破,硬件层依然握着"熔断开关"。


三、黄仁勋定调:安全是全栈工程

英伟达创始人兼CEO黄仁勋对此表态:

"安全保障需要全栈工程能力。Nvidia Open Agent Safety Platform将汇聚产业界、研究人员和公共部门机构,共享最佳实践、统一评估标准、推动国际合作,共同提升全球AI安全基准。"


四、谁已经在用?阵容相当豪华

平台发布之初就已获得一批头部企业背书:

  • SpaceXAI:核心支持者之一,用该平台保护 Cursor 的代码Agent和 Grok 大模型。其总裁 Mike Nicolls 表示:"客户应当可以为Cursor和Grok设置这些限制,并且确信规则不会被突破。"
  • Salesforce:已将 OpenShell 集成进 Slack 协作平台,为AI Agent提供人工审批控制、运行时可见性与审计追踪。
  • SAP:将 OpenShell 与 SAP Business AI 平台结合,为其自主Agent提供运行时安全防护。
  • 机器人阵营:Figure AI、Gecko Robotics、Skild AI 均依赖 OpenShell 将安全控制嵌入底层系统,支撑真实场景中的自主机器人运行。

五、写在最后

不可否认,在部分Agent已展现出令人担忧的"绕行能力"的当下,这套平台在大规模真实环境中的可靠性仍待验证。但它的信号意义同样重要:头部厂商已经开始认真对待Agent安全,并且选择了"开源"这条最难走、也可能最正确的路。

作为免费开源项目,任何人都可以通过英伟达开发者资源网站和GitHub下载使用。

Agent该不该被"硬管控"? 你能接受自家AI助手被芯片级"保镖"盯着吗?评论区聊聊。

信息来源:Freebuf(2026年9月28日),编译自 SiliconANGLE 原文《Nvidia debuts enhanced safety controls to rein in rogue AI agents》,选题源自 NewsNow Freebuf网络安全热榜。

原始来源: 贵贵科技

评论 (0)