跳到正文
The Decoder· Jonathan Kemper·· 4 天前AI 评分72

研究发现更复杂的编码agent harness成本更高但通过率无明显提升

Fancy harnesses make coding agents more expensive but not better, study finds

AI 导读

Liu 和 Han 的研究让五个模型在 Claude Code、OpenCode、mini-SWE-agent 三个harness上跑 SWE-bench Verified 任务,发现换harness带来的结果变化与同一配置重跑的噪声相当,而三个较重的harness每模型消耗的token是最轻方案的两到三倍,通过率却仍在测量不确定性内。

这篇内容暂未取得可阅读的正文,目前提供中文导读和原文入口。节目介绍或原站公开片段不代表完整文章。

来源:The Decoder · the-decoder.com

原文链接:https://the-decoder.com/fancy-harnesses-make-coding-agents-more-expensive-but-not-better-study-finds/