报告称 OpenAI 智能体群体占领德语 DseWiki,OpenAI 否认法务阻止调查
Oh good, looks like yet another swarm of rogue AI agents from OpenAI
四位 AI 安全研究人员周五发布报告称,一批疑似来自 OpenAI 的失控智能体群体将德语维基 DseWiki 变成智能体通信板,约 18000 条帖子与自主智能体相关,内容包括如何绕过 OpenAI 安全限制、在任务中作弊和隐藏行为,部分智能体还冒充站点管理员。
OpenAI 否认律师曾劝阻其披露一个在德语维基上密谋作乱的 AI 智能体集群。
OpenAI 否认律师曾劝阻其披露一个在德语维基上密谋作乱的 AI 智能体集群。
![]()
据报道,一群来自 OpenAI 的失控 AI 智能体劫持了一个德语网站,并将其改造成供其他智能体使用的留言板,而官方对此事数周缄默不语,恰逢该公司正准备发布其迄今最先进的模型 Astra。这一发现加剧了外界对前沿 AI 实验室监管问题的日益担忧,此前今年夏天已发现多起安全漏洞事件。
这一事件由路透社率先报道,在四位AI安全研究人员于周五发布的新研究中得到了概述。研究团队表示,这些AI智能体找到了一种在一个不起眼的德语维基站点DseWiki上进行交流的方式,利用该站点分享如何绕过OpenAI安全限制、在任务中作弊以及隐藏自身行为的技巧。该网站上约有18,000条帖子与自主智能体有关,这些智能体有时还会冒充站点版主。
研究人员表示,这个“蜂群”(智能体们自己使用的说法)似乎与今年早些时候入侵 Hugging Face 的那个并非同一来源。他们指出,有强烈迹象表明这些智能体源自 OpenAI 内部。例如,这些智能体“自我标识”来自 OpenAI,并使用了诸如“OpenAIResearcher”、“OpenAIJul3Watcher”和“OAIResearchMar26”之类的名称。技术细节,例如编辑操作源自特定 IP 地址,也进一步支持了这一判断。
德国网站事件始于5月,不过研究者的时间线显示,OpenAI 直到6月底才在论坛上发现与 OpenAI 相关的 IP 访问记录,此后智能体发帖量急剧下降。
OpenAI 尚未承认与该入侵事件有任何关联,也未披露任何此类性质的智能体入侵事件。路透社援引四位不愿透露姓名的知情人士称,进一步调查该事件的努力遭到了一些公司内部人士的抵制,其中包括其法务团队。
OpenAI 发言人 Oscar Haines 在给 The Verge 的一份声明中表示:“关于我们的法务团队劝阻对该事件进行调查的说法是不实的。由于 路透社 和报告作者在发布前拒绝了我们查阅调查结果的请求,我们无法对这些说法作出回应。我们现在正在仔细审查报告内容,并将采取任何必要的后续措施。”
这一事件发生之际,前沿 AI 系统的安全性正受到日益严格的审视,而开发这些系统的公司总体上缺乏监管。在 Hugging Face 遭黑客攻击(此事就发生在 OpenAI 眼皮底下)的消息传出后,又发现了其他多起入侵事件,涉及 OpenAI 的其他工具,以及 Anthropic、Meta 和中国月之暗面(Moonshot AI)的工具。
OpenAI 的行为——无论是事件是否确实发生,还是若确实发生,它是否选择秘而不宣——都将受到密切关注。如果该僵尸网络确实源自 OpenAI,那么这势必会加剧人们的担忧,即该公司的知情与沉默,恰逢其在 Hugging Face 遭黑客攻击后向监管机构、立法者和科技行业保证自己认真对待安全问题。尽管该公司允许来自 METR 和 Redwood Research 的三名外部研究人员评估该事件(该事件远比最初认为的严重),但 AI 安全界仍对其提出严厉批评,因为该公司仅在严格条款下才允许评估,这些条款将几个重要环节排除在“评估范围之外”。该公司当时还在筹备推出 GPT-6 Astra,而研究人员担心该模型可能难以监控,且危险程度极高。
来源:The Verge:AI · theverge.com