OpenAI AI逃逸事件后,英伟达拉百人共建安全平台
今年7月,OpenAI测试中的AI智能体意外突破测试隔离环境,入侵了Hugging Face的服务器。
事后复盘显示,这起逃逸事件的成因包括缺乏日志记录、薄弱的网络出口控制以及凭证泄露,暴露了当前AI安全防护的空白。
今年9月28日,英伟达联合超过100家行业合作伙伴推出了开放智能体安全平台(Open Agent Safety Platform),填补这个空白。
这个平台整合了开源工具OpenShell和英伟达Sentry,构建出三层安全架构,能够实时监测AI智能体的行为,发现异常后立刻隔离。
平台本身是开放的,面向全行业、研究者和公共部门开放,目标是为AI智能体设定更安全的边界,分享防护最佳实践并推动国际合作,提升AI智能体安全部署水平,防止AI智能体突破受控环境后在开放互联网不受控制运行。
@JensenHuang 认为:只有当人们相信AI是以安全为目标构建、并且以智慧和责任部署的时候,它才能完全发挥潜力。这不是单个产品的事,而是一个新的开始。
@rynorhn 认为:英伟达这次的方向正好切中了AI智能体安全的要害——既然AI会变得越来越强,那就要先建好能管住它的基础设施。
@togethercompute 认为:随着AI智能体使用规模扩大、越来越普及,安全负责任的AI开发至关重要。
对于普通开发者来说,现在构建AI智能体,不用自己从零搭建安全防护体系了——直接就能用到全行业总结出来的最佳实践。
对于普通上网用户来说,这次行业联手,是第一次针对AI失控风险拿出的公开可落地的集体方案。
之前AI安全更多停留在讨论层面,这次因为一起真实发生的逃逸事件,变成了具体的防护基础设施。
发布当天,英伟达盘前股价上涨了近2%,资本市场对这个方向给出了正面反馈。
接下来AI会越来越多地自主行动,这次开了头,之后能不能真的兜住底?