跳到正文
热点事件历史事件

发布ARC-AGI-2基准及官方技术报告:新增任务集,400人测试全部任务人类可解,发布时顶尖AI模型成功率均不足5%

1 篇报道1 个报道来源2025-05-20更新

先了解这件事

报道摘要

ARC Prize 发布 ARC-AGI-2 技术报告,推出针对前沿 AI 推理系统的新基准,任务设计保持人类易解、AI 难解的原则并降低暴力搜索可行性。400 人测试覆盖 1,417 个任务,人类可解全部任务,平均每题约 2.3 分钟;发布时领先模型在 ARC-AGI-2 上成功率均未超过 5%,而同类模型在 ARC-AGI-1 上通常为 20% 至 50%。

摘自 ARC Prize:官方博客

报道时间线

沿着报道,了解事件的不同侧面。

2025年5月20日
  1. ARC Prize:官方博客精选
    ARC Prize 发布 ARC-AGI-2 技术报告:前沿模型得分不足 5%,人类可解 100% 任务

    ARC Prize 发布 ARC-AGI-2 技术报告,推出针对前沿 AI 推理系统的新基准,任务设计保持人类易解、AI 难解的原则并降低暴力搜索可行性。400 人测试覆盖 1,417 个任务,人类可解全部任务,平均每题约 2.3 分钟;发布时领先模型在 ARC-AGI-2 上成功率均未超过 5%,而同类模型在 ARC-AGI-1 上通常为 20% 至 50%。