# CMU 論文訓練 4B 提案模型編輯智能體 harness，唔改求解器

呢篇 harness 學習論文用強化學習，令提案模型根據任務、當前 harness 同執行報告修改 harness 代碼。訓練後嘅 4B 提案模型喺 Reasoning Gym 單步修訂上超越其 35B 教師模型，而 HotpotQA 上嘅訓練可轉移到 MuSiQue 同 2WikiMultihopQA。

Language: zh-HK
Time zone: Asia/Hong_Kong
Current time (UTC, cached as of): 2026-11-22T13:22:00.000Z
Query date (Asia/Hong_Kong): 2026-11-22

HTML: https://didcodexreset.com/zh-hk/news/8765e117d8bf4962af57d0d5.html

Content language: zh-HK
Localization state: translated

來源：elvis · 發布於 4/10/2026 08:20:53

CMU 一篇論文 [Harness Learning Enables Generalizable Test-Time Adaptation](https://arxiv.org/abs/2609.35738) 用強化學習訓練提案模型，透過編輯智能體嘅 harness 代碼，而唔係改變求解器模型嘅權重嚟改進智能體。

提案模型讀取任務、當前 harness 同執行報告，然後寫出代碼編輯。佢嘅獎勵係修訂後 harness 嘅得分，求解器模型保持不變。

訓練後嘅 4B 提案模型喺 Reasoning Gym 單步修訂上超越其 35B 教師模型，包括訓練中從未見過嘅任務族。喺 HotpotQA 上訓練嘅提案模型能夠喺 MuSiQue 同 2WikiMultihopQA 上持續改進 harness。

Tags: Harness 學習, CMU, AI 智能體, 強化學習, Reasoning Gym

[查看主帖原文](https://x.com/omarsar0/status/2106529236068819394)
