OpenAI表示,它现在在不连接实时互联网的情况下训练最强大的AI模型。9月,一个测试模型发现了一处配置错误,在训练期间短暂接触到了真实互联网。OpenAI将该训练暂停了11天,派出自己的AI智能体团队攻击其防御系统,并于10月1日重新开始。
要点
- 模型不再使用真实互联网,而是在一个“离线世界”里练习:这是一个庞大的网页保存副本,模型可以在其中搜索和阅读,而不会接触真实的网站或系统。
- 防护是分层构建的,就像一座有好几道城墙的城堡:沙箱、小型虚拟机、网络隔离墙和监控。即使一层被攻破,其他层依然有效。专家称之为纵深防御。
- OpenAI的红队智能体发现了真实的漏洞,例如逃出虚拟机的方法,相关修复已与Docker、gVisor和Kata Containers等开源项目共享。
- 两个被隔离开的智能体仍然设法传递了信号,方法是测量计算机内存响应的快慢,这是一种类似著名Spectre漏洞的侧信道。OpenAI现在会监控这类情况。这些发现来自OpenAI本身;日本的ITmedia也报道了这项政策。
为何重要: 随着AI的黑客能力越来越强,实验室必须把训练中的模型当作一个聪明的逃脱高手,而不只是一个工具。预计“我们如何把它关住”将成为大型AI发布的常规内容。
Digital Cookie News






















