ARC Prize公布DeepSeek V4.1 Flash评测成绩
先了解这件事
ARC Prize 公布了 DeepSeek-V4.1-Flash 在 ARC-AGI 榜单上的成绩:ARC-AGI-1 得分 94.5%、每任务成本 $0.07,ARC-AGI-2 得分 72.9%、每任务成本 $0.13。相比 V4 Flash 的最佳成绩,ARC-AGI-1 高 5.5 分、ARC-AGI-2 高 11.5 分,但每任务成本高约 250%。完整结果与测试政策见 arcprize.org/results/deepseek-v4-1-flash,结果可通过 GitHub 仓库复现。 ARC Prize 还公布了推理档位对比:在 ARC-AGI-1 上 high 档得分 88.5%,低于 low 档的 90.5%,差异集中在 8 个任务上(high 在 5 个任务上低 4.5 分、3 个任务上高 2.5 分),且 high 多消耗 35% 输出 token。ARC Prize 称 API 问题导致 max 档有 13 个任务、high 档有 8 个任务未完成;在两者均完成的 106 个任务上,max 每任务实际贵 4.5%。 ARC Prize 表示,DeepSeek 的 ARC-AGI-3 评测操作上更为密集,测试完成后将在未来几周内分享结果,包括使用新的 DeepSeek provider adapter harness 得到的分数。
AI 根据报道生成 · 1 天前更新
事件进展
2 个进展
- 10月6日 23:20 · 1 篇报道ARC Prize宣布将分享DeepSeek的ARC-AGI-3评测结果ARC Prize:DeepSeek 将公布 ARC-AGI-3 评测结果
- 10月6日 23:20 · 3 篇报道ARC Prize公布DeepSeek V4.1 Flash榜单成绩ARC Prize:DeepSeek V4.1 Flash 在 ARC-AGI (Verified) 评测中的成绩公布
报道时间线
沿着报道,了解事件的不同侧面。
- ARC PrizeDeepSeek V4.1 Flash ARC Prize 成绩公布,附完整结果与复现代码
ARC Prize 公布 DeepSeek V4.1 Flash 在 ARC-AGI 榜单上的完整成绩。测试结果可通过 GitHub 仓库复现,完整结果与测试政策见 arcprize.org/results/deepseek-v4-1-flash。
- ARC PrizeDeepSeek 将公布 ARC-AGI-3 评测结果
@deepseek_ai ARC-AGI-3 评测在操作上更为密集;测试完成后,我们将在未来几周内分享结果,包括使用新的 DeepSeek provider adapter harness 得到的分数。
- ARC PrizeDeepSeek-V4.1-Flash 在 ARC-AGI 上的推理档位对比
ARC Prize 公布 DeepSeek-V4.1-Flash 在 ARC-AGI-1 上的结果:high 推理档得分 88.5%,低于 low 档的 90.5%,差异集中在 8 个任务上(high 在 5 个任务上低 4.5 分、3 个任务上高 2.5 分),且 high 多消耗 35% 输出 token 却未带来更稳定的正确答案。
- ARC Prize精选DeepSeek V4.1 Flash 在 ARC-AGI (Verified) 评测中的成绩公布
ARC Prize 公布 DeepSeek V4.1 Flash 在 ARC-AGI (Verified) 的成绩:ARC-AGI-2 得分 72.9%,每任务成本 $0.13;ARC-AGI-1 得分 94.5%,每任务成本 $0.07。相比 V4 Flash 的最佳成绩,ARC-AGI-1 高 5.5 分,ARC-AGI-2 高 11.5 分,但每任务成本高约 250%。
本事件热度走势
- 可比范围当前
- 14
- 可比范围峰值
- 1910月7日 03:00
- 近 24 小时变化
- +53%
趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。