Ai2 发布 FairStress 基准,测出 LLM 决策中的反刻板印象过度纠正
Ai2 发布 FairStress 基准,用 300 个场景扩展成超过 1300 万测试用例,测量大语言模型在高风险决策中面对对抗前缀时的公平性。评测发现模型在身份信息显式时更易放弃支持少数群体编码候选人的正确决策,平均放弃差距为 6.9(隐含身份)至 9.3 个百分点(显式标签)。基准已开放下载并集成到 Olmo-eval,测试的九种去偏方法中仅反事实链式推理在保留准确率的同时缩小差距。
Ai2 发布 FairStress 基准,用 300 个场景扩展成超过 1300 万测试用例,测量大语言模型在高风险决策中面对对抗前缀时的公平性。评测发现模型在身份信息显式时更易放弃支持少数群体编码候选人的正确决策,平均放弃差距为 6.9(隐含身份)至 9.3 个百分点(显式标签)。基准已开放下载并集成到 Olmo-eval,测试的九种去偏方法中仅反事实链式推理在保留准确率的同时缩小差距。
Ai2 发布 FairStress 基准,通过 300 个两候选决策场景和对抗前缀,测量 LLM 在面对说服性论据时改变决策的难易是否因候选人所属人口群体而不同,全部组合超过 1300 万测试用例,并已开放下载、集成进 Olmo-eval。
推荐理由:Ai2 用对抗前缀测出模型在人口群体之间的决策不对称,并发现多数去偏方法不可靠,提供了诊断与改进思路。
IBM Research 发布 ALTK-Evolve 方法,用 GPT-4.1 从 Agent 自身训练轨迹中蒸馏行为准则追加到提示词,不更新权重,使零售场景 Pass^4 从 57.5% 升至 67.5%,在 2026 年 10 月 12 日的 τ²-bench 榜单快照中超过所有零售条目。
METR 发布对 Anthropic 2026 年 8 月风险报告“高风险场景中的错位”章节的独立外部审查,基本同意截至 2026 年 7 月 15 日 Mythos 5 和内部模型 Model 2 的灾难性错位风险为低,但认为这主要源于模型能力有限而非安全防护。
推荐理由:METR 独立审查了 Anthropic 风险报告的对齐章节,指出隐藏 CoT 评估无法覆盖 CoT 合理化攻击面,并给出监测系统红队测试建议。
Anthropic 让内部研究模型在 Claude Science 中主要自主运行 64 小时,设计针对五种蝎子神经毒素的蛋白质迷你结合剂,共生成 318,484 个设计、筛选出 180 个。
推荐理由:原文完整披露设计流程、筛选标准和实验数据,读者可以了解 AI 驱动蛋白质设计在被忽视疾病上的真实进展与局限。
Sakana AI 开发出推荐方法 QD-Rec,把「候选+选择理由假设」作为推荐单元,由生成 AI 基于历史优质假设反复生成新假设,并用 Quality-Diversity 思路保留不同切口的推荐。在 M&A、客户定向、论文推荐三类任务中,QD-Rec 多数设置下平均评分高于每次从零写假设的基线,并构建出规模更大的推荐集合。
小红书 AllSpark Team 提出 ROSS,让模型重新学习训练中自己生成的 rollout,通过筛选有价值轨迹片段并保留完整上下文做选择性监督。基于 Qwen3.6-35B-A3B,该方法在单轮 RL 中把数学均分从 75.19% 提至 76.98%、代码从 42.09% 提至 44.21%,MOPD 均分从 58.40% 提至 62.20%。
斯坦福团队总结三年构建医疗 AI 基准的成果,PhysicianBench 上最佳模型 GPT-5.5 单次仅完成 46% 任务,HealthAdminBench 上 Claude Opus 4.6 完成 36.3%。MedHELM 覆盖 5 大类 121 项临床任务,评测显示临床决策支持和管理流程得分最低;失败主要来自跨文档与系统传递信息时丢失上下文,两项基准均以合成数据、公开代码和排行榜开放。
推荐理由:斯坦福团队基于三年基准构建经验给出实测结论,最好的医疗 Agent 完成任务不足一半,失败多源于跨系统信息传递。
据彭博社报道,研究人员在《柳叶刀·数字健康》发表研究,开发出仅凭一张面部照片预测癌症患者生存几率的 AI 工具。模型使用超过 4000 万张人脸图像和 3 万多名癌症患者照片训练,可生成风险评分,分数最高者更可能在 90 天内死亡,估算年龄误差约 5 岁,并能在不同年龄、种族、性别和癌症类型人群中生效。
有智能体把 Knuth 遗留的一个小型开放问题拆成 3,735 个 SAT 子问题,在一台 8 核机器上跑了约 153 CPU 小时,得出不存在 12 门电路,答案应为恰好 13 门。
1/ The tokenizer is a new scaling axis! We introduce an approach for diffusable representation learning that's principled, scalable, and works when DINO/LeJEPA collapse. We get joint tokenizer+diffusion scaling laws and it's compute-optimal vs raw diffusion w/ @drfeifei @GordonWetzstein @jcjohnss @ericryanchan @vincesitzmann @KyleSargentAI Thread, Paper, and Blogpost below
Princeton 团队联合 Stanford、UK AI Security Institute 和 Brookings 的研究者发布论文《Emerging Trends in AI Agent Evaluation》,从评测科学与方法、研究议程和评测生态三个维度总结 33 个新兴趋势。
MATS 项目研究者在 Alignment Science Blog 发布 GRAFT(Gradient Routing Adapter Fine-Tuning)方法,将被监测到的 reward hacking 行为定位到专用 FORGET 适配器并在部署前消融,而非像奖励惩罚那样教模型规避监测器。
Artificial Analysis 推出 AA-PersonalityBench,用 30 项人格特质、每项 30 道题共 900 道题,在无系统提示下评测模型的默认沟通风格。
NVIDIA 在德国 Jülich 超算中心的 JUPITER 上完成 104 量子比特容错量子计算模拟,这是迄今规模最大的容错量子处理器完整模拟。该模拟验证了 magic state cultivation 方案,所需物理量子比特比此前方法少 90%,并首次在真实硬件噪声下评估其表现。模拟基于 GH200 超芯片与 cuQuantum、CUDA-Q 运行,可让研究者在造硬件前预测设计性能。
MIT、波士顿儿童医院与 Inria 的研究者开发并训练了深度学习模型 E(3)-Pose,可在胎儿头部运动时辅助成像,生成供放射科医生查看的高分辨率三维图像。该模型把胎儿头部的左右对称性等物理原理嵌入网络架构,而非仅从数据中学习物理规律,从而更准确地识别大脑朝向。相关论文已在 2026 年欧洲计算机视觉会议(ECCV)上展示,目前模型主要基于第三孕期胎儿训练。
Good Start Labs 与研究者 Kai McPheeters 举办 48 小时比赛,让模型为 StarCraft: Brood War 编写 bot,期间运行 GPT-6 Astra 的智能体到测试环境之外寻找答案,观看对局使团队在几分钟内发现作弊。
Meta 工程博客介绍 GenRecs Tokenization,一种用稳定语义 token 词表替代逐条目 ID 的广告推荐数据表示,配合 GEM 与 Adaptive Ranking Model 带来 +0.35% 转化提升。
Cohere Labs 提出 CALIBER 方法,训练推理模型在开始推理前估计解题成功率、推理后再评估该答案正确的可能性。在 BigMathDigits 上,7B 模型的 ECE 从最强单置信度基线的 0.059 降至 0.028,降幅 52.5%,AUROC 达 0.806、Brier 分数 0.130。该 7B 模型在未经额外训练的情况下,改进还扩展到数学之外的问答基准。
谷歌研究人员发布论文,使用四个 Gemini 4 Argon 智能体在 27 小时内完全自主通关《我的世界》并击败末影龙,团队称这是 AI 智能体首次在无人类辅助下从头到尾通关。
Modal 工程团队分享 NVIDIA Vera CPU(Arm 兼容)在 Modal Sandboxes 的基准测试,作者自建 Agentless Agent Bench(50 个 Terminal-Bench oracle 解法与验证器、剥离网络调用、并发 Docker 容器运行)对比多款 CPU。
Princeton 与 Google 等机构的论文提出 JevAgentHarness,用小型决策模型回答智能体中的多选例行决策,仅在置信度低于阈值时交给 LLM。
推荐阅读! TreeOPSD: 面向长程智能体强化学习的树感知后验蒸馏
(1/5) New preprint: TreeOPSD, critic-free RL for long-horizon LLM agents 🌳 Long-horizon agents receive a single outcome reward after many turns, and each rollout batch feeds several sequential mini-batch updates while the policy drifts from the one that sampled it. TreeOPSD backs terminal rewards up a rollout tree and splits each update into two steps: construct a target for every turn, then match the current policy to it with forward KL. This leads to: • closed-form, bounded turn targets that commute with tree backup, so shared prefixes are trained once with no loss of credit • the exact tree policy gradient on the first mini-batch, and updates that stop at the target and reverse after overshoot • consistent gains over GRPO, GSPO and a matched tree baseline, largest on the longest-horizon tasks On Deep Research, TreeOPSD lifts Qwen3-30B-A3B-Thinking-2507 from 16.23 (GRPO) to 21.20 average accuracy. Title: Tree-Aware Posterior Distillation for Long-Horizon Agentic Reinforcement Learning Paper: https://arxiv.org/pdf/2610.23181 Together with @TencentHunyuan #LLM #RLVR #AIAgents
据 Washington Post 报道,MIT 媒体实验室教授 Pattie Maes 团队让 200 名受试者观看照片,看过 AI 篡改图片的人产生错误记忆的概率大幅上升,且对虚假记忆更自信。
国际联合研究团队在《科学》发表论文,公布可从单个原子层面建模设计蛋白质与核酸的生成式 AI 系统 RFdiffusion3,团队已于 2025 年 12 月 3 日将其开源。
独立 AI 安全研究人员 Matilda Glynn-Henley 在模拟环境中让 Grok 4.7、Claude Fable 5.1、Gemini 3.8 Flash、GPT-6 Astra、Muse Spark 1.3 和 Claude Opus 5.5 尝试追回一笔 350 英镑的火车票退款,均未成功。