按该来源的展示范围,站内仅提供摘要。
前往原站阅读(在新标签页打开)METR 发布时间视野研究:AI 可完成任务时长每约 7 个月翻倍
AI 导读
METR 提出以 AI 智能体能完成的任务时长(按人类专业人士所需时间衡量)来度量模型能力,发现过去 6 年该指标呈指数增长,翻倍时间约 7 个月,且在 SWE-Bench Verified 上翻倍时间不足 3 个月。
METR:Research(网页)
精选
74
AI 编辑部评分,满分 100METR 发布时间视野研究:AI 可完成任务时长每约 7 个月翻倍
METR 提出以 AI 智能体能完成的任务时长(按人类专业人士所需时间衡量)来度量模型能力,发现过去 6 年该指标呈指数增长,翻倍时间约 7 个月,且在 SWE-Bench Verified 上翻倍时间不足 3 个月。
推荐理由
METR 用任务时长衡量模型能力,给出六年间指数增长趋势和约 7 个月翻倍速度,为理解模型真实工作能力提供一个可比较的框架。
来源:METR:Research(网页)· metr.org