The Decoder· Jonathan Kemper·· 8 天前AI 评分60
研究：编码智能体框架让成本更高但效果未提升
Fancy harnesses make coding agents more expensive but not better, study finds
AI 导读
Liu 和 Han 的研究用 Claude Code、OpenCode 和 mini-SWE-agent 三个框架测试 Qwen3.6、Qwen3.8、Deepseek-V4-Flash、GLM-5.3-Flash 和 HY4-Preview 五个模型，发现更换框架对 SWE-bench Verified 通过率的影响与同一配置重跑一次的波动相当，约 13% 的任务结果会翻转。
来源：The Decoder · the-decoder.com