该来源未收录可展示正文,站内仅提供摘要。
阅读原文(在新标签页打开)HarnessTax 研究:harness 对 coding agent 的影响有多大
AI 导读
UC Berkeley 团队发布 HarnessTax 研究,评估 21 个模型-harness 组合(7 个模型、3 个 harness:Claude Code、Codex CLI、Pi),在 SWE-bench Lite 和 Terminal-Bench 2.0 各 30 个任务上各跑 3 次。
Hacker News:AI 热帖
65
AI 编辑部评分,满分 100HarnessTax 研究:harness 对 coding agent 的影响有多大
UC Berkeley 团队发布 HarnessTax 研究,评估 21 个模型-harness 组合(7 个模型、3 个 harness:Claude Code、Codex CLI、Pi),在 SWE-bench Lite 和 Terminal-Bench 2.0 各 30 个任务上各跑 3 次。
来源:Hacker News:AI 热帖· harnesstax.github.io
事件后续 · 1查看事件全部 →
UC Berkeley HarnessTax 研究:编码代理的 harness 选择对成功率影响小但成本差异可达 5 倍