跳到正文
热点事件持续更新

山东大学研究:换代理框架不提升成绩却更贵

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

山东大学研究者发布研究,让五个模型分别在 Claude Code、OpenCode 和 mini-SWE-agent 三个代理框架(harness)下运行 SWE-bench Verified 任务,结论是:更换框架带来的成绩波动,与同一配置重复运行两次的差异相当;但成本最多可达三倍。 该研究针对的是“更花哨的 coding agent harness 能提升成绩”这一说法。研究者称,换框架几乎不改变结果,却可能显著推高成本。结论仅适用于上述三个框架和 SWE-bench Verified 任务。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月24日
  1. The Decoder:AI News
    山东大学研究:花哨的 coding agent harness 更贵但并不能提升成绩

    山东大学研究者让五个模型在 Claude Code、OpenCode 和 mini-SWE-agent 三个 harness 下跑 SWE-bench Verified 任务,发现换 harness 的结果波动与重复运行同一配置相当,成本却最多可达三倍。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。