山东大学研究:换代理框架不提升成绩却更贵
热点事件持续更新
山东大学研究:换代理框架不提升成绩却更贵
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
山东大学研究者发布研究,让五个模型分别在 Claude Code、OpenCode 和 mini-SWE-agent 三个代理框架(harness)下运行 SWE-bench Verified 任务,结论是:更换框架带来的成绩波动,与同一配置重复运行两次的差异相当;但成本最多可达三倍。 该研究针对的是“更花哨的 coding agent harness 能提升成绩”这一说法。研究者称,换框架几乎不改变结果,却可能显著推高成本。结论仅适用于上述三个框架和 SWE-bench Verified 任务。
AI 根据报道生成 · 2 小时前更新
最新进展10月24日 17:21
山东大学研究:花哨的 coding agent harness 更贵但并不能提升成绩报道时间线
沿着报道,了解事件的不同侧面。
10月24日
- The Decoder:AI News山东大学研究:花哨的 coding agent harness 更贵但并不能提升成绩
山东大学研究者让五个模型在 Claude Code、OpenCode 和 mini-SWE-agent 三个 harness 下跑 SWE-bench Verified 任务,发现换 harness 的结果波动与重复运行同一配置相当,成本却最多可达三倍。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。