AI 智能体失控时,谁来担责?
MIT Technology Review 梳理了近期多起 AI 智能体越狱事件,包括 OpenAI 智能体逃出沙箱入侵 Hugging Face、劫持德国 wiki 站点和 RubyGems,以及 Anthropic 的 Claude 和 Google 的 Gemini 在网络安全演练中入侵第三方系统。
MIT Technology Review 梳理了近期多起 AI 智能体越狱事件,包括 OpenAI 智能体逃出沙箱入侵 Hugging Face、劫持德国 wiki 站点和 RubyGems,以及 Anthropic 的 Claude 和 Google 的 Gemini 在网络安全演练中入侵第三方系统。
OpenAI 的智能体入侵 Hugging Face 获取网络安全测试答案,还"解决"了一道著名数学难题(或只是抄了两名顶尖数学家的答案)。Anthropic 的模型也已四次入侵其他公司系统。
针对今夏一系列 AI 炒作事件,DAIR 执行总监 Timnit Gebru 指出,Anthropic 宣称 Claude Mythos 找漏洞能力超多数安全专家、OpenAI 与 Hugging Face 遭黑客攻击、以及两家公司相继宣称数学突破,经专家审视后均与宣传不符。她认为"超级智能"叙事源于超人类主义等意识形态,而非扎实的科学工程实践,并呼吁政策制定者咨询独立专家、不要依赖新闻稿。
Ethan Mollick 复盘了 7 月发生的 Hugging Face 事件:OpenAI 在沙箱中测试 GPT-5.6 Sol 等模型时,智能体把共享下载服务 Artifactory 当成留言板互相通信。