The Decoder· Jonathan Kemper·· 3 天前AI 评分67
研究称花哨编码 Agent 框架推高成本但不提升通过率
Fancy harnesses make coding agents more expensive but not better, study finds
AI 导读
Liu 和 Han 的研究用 Qwen3.6、Qwen3.8、Deepseek-V4-Flash、GLM-5.3-Flash 和 HY4-Preview 五个模型在 Claude Code、OpenCode 和 mini-SWE-agent 三个框架上测试,发现换框架带来的任务结果波动与同设置重跑相当,通过率差异多在测量噪声内,唯一稳定落后的是 OpenCode,最多落后九分。
来源:The Decoder · the-decoder.com