The Decoder· Jonathan Kemper·· 6 小时前AI 评分67
研究:花哨的 harness 让编码智能体更贵但并未更强
Fancy harnesses make coding agents more expensive but not better, study finds
AI 导读
一项研究让 Qwen3.6、Qwen3.8、Deepseek-V4-Flash、GLM-5.3-Flash 和 HY4-Preview 在 Claude Code、OpenCode、mini-SWE-agent 三种 harness 上跑 SWE-bench Verified,发现换 harness 带来的任务结果变化与同一配置重跑相当,通过率差异多在测量噪声范围内。
来源:The Decoder · the-decoder.com