The Decoder· Jonathan Kemper·· 2 小时前AI 评分66
研究发现精巧的编码智能体 harness 更贵但并未更强
Fancy harnesses make coding agents more expensive but not better, study finds
AI 导读
Liu 与 Han 的研究用 5 个模型、3 套 harness(Claude Code、OpenCode、mini-SWE-agent)在 SWE-bench Verified 的 45 道最难题及 447 道题池上测试,发现更换 harness 带来的成绩波动与同一配置重跑相当,两者任务级翻转率均为 13%,而换模型则为 22%。
来源:The Decoder · the-decoder.com