跳到正文
The Decoder· Jonathan Kemper·· 6 小时前AI 评分67

研究:花哨的 harness 让编码智能体更贵但并未更强

Fancy harnesses make coding agents more expensive but not better, study finds

AI 导读

一项研究让 Qwen3.6、Qwen3.8、Deepseek-V4-Flash、GLM-5.3-Flash 和 HY4-Preview 在 Claude Code、OpenCode、mini-SWE-agent 三种 harness 上跑 SWE-bench Verified,发现换 harness 带来的任务结果变化与同一配置重跑相当,通过率差异多在测量噪声范围内。

来源:The Decoder · the-decoder.com