研究與評測
開發者綜整 57 篇 Coding Agent 論文:Harness 設計致 6 倍效能差距,精簡工具與百行指令為關鍵
Reddit r/ClaudeAI單一來源
尚未逐項核實
目前依單一來源整理,這是來源數量描述,不是對消息真假的判定。
社群開發者綜整 57 篇軟體開發與 Coding Agent 相關論文指出,決定代理能力的關鍵在於外層環境設計(Harness)而非模型大小;多倫多大學研究顯示,同一模型在不同 Harness 架構下的效能差距可達 6 倍。根據多方實測與論文數據,高效 Harness 的核心在於極簡化:在工具配置上,Vercel 移除了代理 80% 的工具後,任務成功率從 80% 提升至 100%,Token 消耗減少一半以上,延遲更從 724 秒降至 141 秒;微軟據傳亦將 100 個工具精簡至 5 個。在提示詞與規則方面,OpenAI 曾嘗試單一龐大指令檔但宣告失敗,最終將主要指令濃縮至約 100 行,並將 AGENTS.md 作為指向外部規則的目錄。此外,研究發現文字形式的安全規則僅有 4% 至 16% 能發揮實質作用,多數會被模型忽略,實務上須改用 git hooks、linter 與靜態分析等可執行腳本建立硬性防線。針對規則隨版本更迭而失效的問題,OpenAI 則部署專門的「doc-gardening」代理,定期自動掃描陳舊文件並發送 pull request 修正。
讀原始報導