The Decoder· Jonathan Kemper·· 8 小时前AI 评分67
研究：编码智能体的 harness 差异多在噪声范围内，成本却可差三倍
Fancy harnesses make coding agents more expensive but not better, study finds
AI 导读
Liu 与 Han 的研究发现，编码智能体的 harness 选择对通过率的影响基本落在重跑噪声范围内，但成本差异明显。研究用 Qwen3.6、Qwen3.8、Deepseek-V4-Flash、GLM-5.3-Flash 和 HY4-Preview 五个模型跑 Claude Code、OpenCode、mini-SWE-agent 三种 harness，在 SWE-bench Verified 的 447 个任务上，最重与最轻的 harness 差距不到两点，而同一设置重跑本身就有最多六点波动。
来源：The Decoder · the-decoder.com