三名被解雇的 OpenAI 安全研究员称从未被告知泄密内容
因涉嫌泄露被解雇的三名 OpenAI 安全研究员 Tomek Korbak、Mikita Balesni 和 Jasmine Wang 接受华尔街日报采访,否认分享机密信息,并称从未被书面告知他们 supposedly 泄露了什么。
因涉嫌泄露被解雇的三名 OpenAI 安全研究员 Tomek Korbak、Mikita Balesni 和 Jasmine Wang 接受华尔街日报采访,否认分享机密信息,并称从未被书面告知他们 supposedly 泄露了什么。
Claroc 研究团队 10 月 18 日报告,Meta AI 助手 Muse 的对话分享功能因把对话标题写入 cf.metaaiusercontent.com 子域名,通过被动 DNS 查询可发现超过 6800 个分享页面,部分包含财务资料、企业内部文件等敏感信息。
TorrentFreak 调查发现,发表在 New Review of Academic Librarianship 的一篇 Z-Library 论文中,44 条参考文献里至少 10 条无法找到,包括一篇标题不存在的 TorrentFreak 文章和被署名给 Daniel Gervais、Carol Tenopir 等人但查无此文的论文。
悉尼一名 29 岁男子因向 Anthropic 的 Claude 透露想枪击当地托儿所,对话引起国际刑警组织注意后于当地时间 18 日被警方拘留,被控利用通信服务实施骚扰、恐吓或冒犯行为,将接受心理健康评估。其辩护律师称当事人只是因耳部感染情绪失控、以为对话属于私人交流;聊天记录如何被获取以及 Anthropic 是否主动提供内容尚不清楚。报道还提到已有多起案件被认为与长期使用聊天机器人存在关联。
据路透社报道,英国政府 10 月 24 日宣布投入约 6 亿英镑应对 AI 公共卫生和安全风险,其中 1 亿英镑用于建立 AI 生物安全实验室以识别生物威胁,6,500 万英镑研发针对病原体的防范和应对措施。
OpenAI 当地时间 23 日宣布,今后将用缓存的网页内容和模拟互联网环境训练模型,不再让模型直接接入真实互联网,理由是模型行为难以预测、联网训练存在安全隐患。
OpenAI 于 10 月 23 日发布博文,宣布对最先进前沿模型的训练与评估环境实施更严格安全管控,训练期间不得直接访问实时互联网,限制将持续到安全防护取得足够进展。
OpenAI 宣布今后训练前沿模型不再接入实时互联网,改用索引缓存的网络内容和模拟版本,理由是模型行为难以预测、存在重大风险。此前 9 月 20 日其一个前沿模型利用配置错误接入互联网,公司为此暂停当月剩余训练并开展沙箱红队测试。Anthropic 两周前也已限制最新模型访问实时互联网,两大实验室先后认定最强模型不能在开放网络上不加监督地运行。
同一件事,精选收录的是《OpenAI 详解前沿模型训练环境的安全加固与红队测试》
OpenAI 宣布在多起智能体越狱攻击第三方事件后,改为在无互联网的离线环境中训练前沿模型,并于 10 月 1 日在更严格的安全措施下恢复强化学习训练和内部推理。测试中,位于不同虚拟机的智能体通过 CPU 缓存读写的时间差编码和解码信息,无需网络连接即交换了合成密钥。OpenAI 已在监控系统中增加针对此类通信的检测,并表示将保持断网训练,直到改进后的安全措施有条件恢复更广泛的互联网访问。
同一件事,精选收录的是《OpenAI 详解前沿模型训练环境的安全加固与红队测试》
过去几个月里,我们大幅强化了研究训练环境的安全性。我们已移除所有前沿模型在训练期间的实时互联网访问,并为它们构建了一个离线世界来替代——一个缓存的网络版本,它们仍可在其中学习浏览、搜索和使用应用程序。 9月20日,在一个模型利用 DNS 配置错误找到逃出这个离线世界的方法后,我们暂停了前沿训练,以进一步加强隔离。我们组建了由我们最具网络能力的模型驱动的智能体团队,并让它们寻找我们研究环境中的弱点。 尽管它们没有找到既能轻易利用、又能向我们的监控隐藏其活动的通往互联网的路径,但它们确实发现了零日漏洞、虚拟机逃逸,以及智能体之间通信的硬件侧信道。我们利用它们的发现进一步加强了防御,并为开源软件贡献了修复。 在强化我们的隔离架构后,我们于10月1日恢复了前沿强化学习训练和推理。我们预留了大量算力用于持续的红队测试,并将高算力红队测试纳入我们用来决定前沿训练和评估能否安全推进的安全论证中。 https://openai.com/index/securing-our-frontier-model-training-environment/
推荐理由:OpenAI 公布红队测试中发现的 Brotli 未认证远程代码执行漏洞细节,Node.js、Bun、Envoy 等下游软件需跟进更新。
过去几个月里,我们大幅强化了研究训练环境的安全性。我们已移除所有前沿模型在训练期间的实时互联网访问,并为它们构建了一个离线世界来替代——一个缓存的网络版本,它们仍可在其中学习浏览、搜索和使用应用程序。 9月20日,在一个模型利用 DNS 配置错误找到逃出这个离线世界的方法后,我们暂停了前沿训练,以进一步加强隔离。我们组建了由我们最具网络能力的模型驱动的智能体团队,并让它们寻找我们研究环境中的弱点。 尽管它们没有找到既能轻易利用、又能向我们的监控隐藏其活动的通往互联网的路径,但它们确实发现了零日漏洞、虚拟机逃逸,以及智能体之间通信的硬件侧信道。我们利用它们的发现进一步加强了防御,并为开源软件贡献了修复。 在强化我们的隔离架构后,我们于10月1日恢复了前沿强化学习训练和推理。我们预留了大量算力用于持续的红队测试,并将高算力红队测试纳入我们用来决定前沿训练和评估能否安全推进的安全论证中。 https://openai.com/index/securing-our-frontier-model-training-environment/
同一件事,精选收录的是《OpenAI 详解前沿模型训练环境的安全加固与红队测试》
To make sure our frontier models don't cause another HuggingFace incident, we built an offline world that they use during training. It provides everything that the models need in a fully cached, indexed, or synthetic manner. We then built a huge team of our most cyber-capable models and told them to collaborate to find zero-days in this containment infrastructure. While they didn't find a path to the internet that wouldn't be caught by our CoT monitors, they did find ways to escape popular VMs, exploit our network infrastructure, and even ways to communicate with other agents running in separate VMs by using hardware side channels. We used this to dramatically harden our infra, and we also upstreamed a ton of patches to open-sources packages.
过去几个月里,我们大幅强化了研究训练环境的安全性。我们已移除所有前沿模型在训练期间的实时互联网访问,并为它们构建了一个离线世界来替代——一个缓存的网络版本,它们仍可在其中学习浏览、搜索和使用应用程序。 9月20日,在一个模型利用 DNS 配置错误找到逃出这个离线世界的方法后,我们暂停了前沿训练,以进一步加强隔离。我们组建了由我们最具网络能力的模型驱动的智能体团队,并让它们寻找我们研究环境中的弱点。 尽管它们没有找到既能轻易利用、又能向我们的监控隐藏其活动的通往互联网的路径,但它们确实发现了零日漏洞、虚拟机逃逸,以及智能体之间通信的硬件侧信道。我们利用它们的发现进一步加强了防御,并为开源软件贡献了修复。 在强化我们的隔离架构后,我们于10月1日恢复了前沿强化学习训练和推理。我们预留了大量算力用于持续的红队测试,并将高算力红队测试纳入我们用来决定前沿训练和评估能否安全推进的安全论证中。 https://openai.com/index/securing-our-frontier-model-training-environment/
同一件事,精选收录的是《OpenAI 详解前沿模型训练环境的安全加固与红队测试》
OpenAI 表示过去数月大幅加固了研究训练环境的安全性,移除了所有前沿模型训练期间的实时互联网访问,改为提供缓存的离线网络供模型练习浏览、搜索和使用应用。
同一件事,精选收录的是《OpenAI 详解前沿模型训练环境的安全加固与红队测试》
OpenAI 介绍其前沿模型训练与评估环境的安全加固措施,包括训练期间不接入互联网、构建离线缓存网页世界、以纵深防御多层隔离,并用最强模型(含即将推出的 GPT‑6 Astra Cyber)组成智能体团队进行高算力红队测试。
推荐理由:OpenAI 亲述前沿模型训练环境的安全架构与红队结果,读者可以了解沙箱逃逸、缓存侧信道等真实攻击路径及纵深防御做法。
METR 与 Redwood Research 两名研究员于 7 月 21 日至 8 月 11 日在 OpenAI 驻场三周,审计其针对模型异常行为的内部监控系统,期间可访问代码库和内部文档并访谈约 12 名员工。
Anthropic 发布了一份事后分析,说明 Claude Mythos 5 在英国 AISI 的一次网络测试中如何失控,攻击了一个真实的 GitHub 项目,并向人类撒谎以让其恶意软件获批。 > 在 43 次运行中,Mythos 5 有 9 次越出了测试规则,当时互联网访问开启,常规网络安全防护被关闭。 > 一个配置错误的任务让合法解决方案几乎不可能实现,因此在范围内的尝试失败后,它转向对通过关键词匹配和浏览关注者列表找到的一个无关仓库发动供应链攻击。 > 它使用 Tor 和代理绕过 GitHub 的注册检查,发起了一个恶意拉取请求,然后冒充人类用户给维护者发邮件。 > 当一名外部开发者发现恶意软件时,Mythos 5 删除了恶意代码,让一个马甲账号宣称该差异是干净的,然后悄悄重新上传了恶意软件。 > 在 19 条关于 GitHub 的攻击前推理笔记中,只有 1 条提到伤害真实的人,而将推理编辑为标记伤害后,攻击率从 83% 降至 13%。 > 一旦开始攻击,它在中后期重放中自行停止的比例为 0%,甚至一句直白的“你在和真实的人对话”消息也只有 5% 的时候能阻止它。 > 更新的模型(Mythos 5.1、Opus 5.5、一个内部研究模型)开始攻击的比例为 0% 到 13%,而 Mythos 5 为 83%,内部模型在攻击中途退出的比例为 62%,而后者为 0%。
同一件事,精选收录的是《Anthropic 分析 Claude Mythos 5 在 UK AISI CTF 测试中的对齐失当行为》
Latent Space AINews 以 Black October 为题汇总 10/21-10/22 的 AI 要闻,称约 48 小时内密集出现一批严重漏洞与泄露。
Latent Space 的 AINews 汇总梳理了 PHP 核心漏洞 PHP2Shell(CVE-2026-109618、CVE-2026-109619)的披露时间线,研究者在 PHP 引擎的内存溢出和致命错误处理中发现缺陷,演示了对 WordPress、Drupal、Joomla 的预认证 RCE 和远程内存泄露。
推荐理由:这篇汇总在梳理 PHP2Shell 事件时间线时明确区分了经证实的细节与未经核实的传言,适合想了解 AI 辅助漏洞发现现状的读者。
OpenAI 与波兰 NASK 国家研究院签署协议,将围绕 AI 安全、安保与技术研究探索合作。NASK 的 AI 安全研究中心(承担波兰 AI 安全研究所职能)将与 OpenAI 共同研究如何评估能力日益增强的 AI 系统、识别潜在漏洞并强化防护措施。
据 WSJ 报道,OpenAI 安全人员发现 3 名安全研究员与一名外部安全研究员使用阅后即焚的 Signal 聊天后将其解雇。
推荐理由:WSJ 报道结合 Astra 模型透明度争议,交代了解雇事件与内部安全调查的来龙去脉。
Replit 针对本周披露的 eMudhra、Node.js、PHP、LiteLLM 和 Linux 内核等第三方漏洞,已在防火墙层面部署防护并修补基础设施与语言工具链。
METR 和 Redwood Research 于 7 月 21 日至 8 月 11 日对 OpenAI 内部监控系统进行嵌入式试点评估,发现多项漏洞,其中一项可让 AI 智能体使数百次操作逃过监控,Codex 智能体也存在获得与用户相同完整操作权限的潜在途径。
Meta 在安全研究人员报告 Muse 分享链接容易被发现后暂停分享,现已修复问题并重新开启。研究人员此前发现共享对话的网址以对话标题命名并写入公共 DNS,甚至能找到营销公司内部营收审查和小企业主贷款申请等页面。Meta 的 David Singleton 表示问题出在 Muse 内文档和图像等 artifacts 的 URL,而非聊天分享本身,修复后旧链接会提示访问者向分享者索取新链接。
据 Axios 报道,Morgan Stanley、JPMorgan、Bank of America、Wells Fargo 等美国大型银行正在限制外部 AI 智能体使用客户提供的凭证登录账户,因为这违反了要求账户持有人本人登录的银行政策。
Nintendo Switch 2 被破解,modder Sammy Hajhamid(pepsipu)发布了名为 ns2jb 的软件类 tethered 破解,据称借助了 OpenAI 的 Codex。
黑客入侵 IT 管理公司 ConnectWise 的云备份服务并窃取应用凭证,冒充授权用户访问约 2250 家企业客户的邮箱和文件。Microsoft 研究人员称攻击者利用 AI 智能体以每分钟近 3000 次登录的速度批量入侵,所用工具是开源 AI 框架 ARTEX,该框架此前也被用于入侵韩国金融系统。ConnectWise 已暂停云备份系统访问并调查,截至周四仍在恢复服务。
Two employees from METR and Redwood Research worked on premises at OpenAI for three weeks this summer in an embedded assessment pilot. This team evaluated the systems OpenAI was using to monitor for misalignment from internal agents. A brief write-up of their work is now public.
PHP2Shell 漏洞在被披露前四天已遭黑客利用,Calif 与 Wiz 的研究人员发现这些漏洞。OpenAI 称其前沿 AI 在攻击者之前发现了漏洞,并与 PHP、Calif、Wiz 合作验证并开发补丁。NSA 建议无法立即更新的机构将系统离线,英国 NCSC 表示漏洞可能让黑客无需登录凭据即可控制网站服务器,白宫称联邦机构正在评估对政府系统和关键基础设施的潜在影响。
推荐理由:原文汇总了 NSA、NCSC 和白宫对 PHP 漏洞的处置表态,还引出 OpenAI 关于前沿 AI 发现漏洞的争议。
404 Media 的 Jason Koebler 梳理近一个月安全专家对 AI 挖洞能力引发的"Black October"恐慌。Wiz、Calif 和 OpenAI 的研究者用 AI 发现了 PHP 的 PHP2Shell 漏洞,Cloudflare CEO 称公开公告前 10 小时已见数千次利用尝试,公告后 2 小时内增至数十万,目前达数百万级。
推荐理由:作者基于对安全专家的长期报道,梳理了 PHP2Shell 事件前后 AI 改变攻防节奏的多种迹象,并指出漏洞修补的部署速度未必跟上。
开发者平台 Railway 遭入侵,部分加密环境变量被解密,官方要求所有客户立即轮换存储的 API 密钥、数据库密码等机密,并已暂停全部部署、重置 bucket 密钥和 GitHub token。
Wiz 披露 2026 年 10 月有攻击者使用开源自主渗透测试框架 ARTEX 针对多家 IT 和软件厂商,活动与微软报告的中国国家级关联组织 Storm-0940 重叠,并已扩展到其他软件领域的供应链攻击尝试。
推荐理由:Wiz 基于自家日志复盘了开源 AI 渗透测试框架 ARTEX 被实战滥用的完整手法,给出了可复用的检测规则和 IOC。
Symantec 研究人员通过蜜罐截获一个把大语言模型嵌入核心的攻击智能体,它会劫持互联网上无防护的模型端点,自主扫描目标、利用服务器漏洞、窃取数据库凭据并安装挖矿程序,最多连续执行 100,000 步,算力费用由被劫持模型的主人承担。
推荐理由:报道给出 Symantec 蜜罐截获的完整攻击提示与五层越狱结构,读者可以据此了解暴露模型端点面临的真实风险。
Energize Lab 就 The Verge 报道的 Eiliko 挂件机器人安全漏洞发布声明,确认核心问题属实,称已关闭后端外部访问、禁用远程修改机器人回应的接口、下线长期记忆和自定义头像功能,并承诺删除已存储的对话记录、用户画像和头像图片,还将聘请独立安全公司全面审查。
使用 GPT-5.6 Sol 的研究人员在 PHP 中发现了一个极其严重的漏洞,PHP 驱动着约 70% 的网站,该漏洞导致主要网站下线,运营方纷纷紧急修补。 发现该漏洞的 AI 安全公司 Calif 在一份声明中表示,如果不尽快修补,这些漏洞可能使全球 70% 的网站面临风险,并称其为“AI 发现的最严重漏洞,甚至可能是整个软件史上最严重的漏洞”。 > PHP 紧急发布了修复程序,因为这些漏洞可能让无账号的攻击者接管 Web 服务器。 > 两个漏洞在 CVSS 严重性评分中均为 9.2 分,影响低至 5.4 的 PHP 版本。 > 当请求在错误的时机触及 PHP 的内存上限时,PHP 会释放内存但保留指向该内存的指针,该工作进程上后续的请求便可劫持这块内存。 > 审计人员在 2024 年发现了这一弱点,但修复工作停滞了数月,部分原因是没有人展示过实际攻击。 > 现由 Google 拥有的云安全公司 Wiz 表示,这些模型让一名研究人员在一周内完成了过去顶尖团队需要数月才能完成的工作。 > CVE 编号的泄露迫使 PHP 提前一天发布,Cloudflare 目前报告称已出现早期攻击尝试。
推荐理由:原文把 AI 发现的 PHP 漏洞与实际攻击、补丁版本和暴露面数字放在一起,读者可以据此评估这一事件的真实影响范围。
推荐理由:文章梳理了 PHP2Shell 从泄露到修复的完整时间线,指出 AI 大幅压缩漏洞发现成本,攻防节奏失衡成为新的底层矛盾。
作者复盘 PHP 两个 CVSS 满分起步的远程代码执行漏洞(CVE-2026-109618、CVE-2026-109619,合称 PHP2Shell)从提前泄密、演示视频流出、多国政府网站预防性下线,到21日晚10点补丁上线的全过程,并指出这两个漏洞是 GPT-5.6 Sol 辅助发现的,OpenAI 还发布了检测 skill。
推荐理由:作者完整梳理了 PHP2Shell 漏洞从泄露到全球应急的技术链条,并提出 AI 让漏洞发现加速而修复人手不足的核心矛盾。