# CMU 논문, 솔버를 바꾸지 않고 에이전트 하네스를 편집하는 4B 제안 모델 훈련

이 하네스 학습 논문은 강화 학습으로 제안 모델이 과제, 현재 하네스, 실행 보고서를 바탕으로 하네스 코드를 수정하도록 한다. 훈련된 4B 제안 모델은 Reasoning Gym 단일 단계 수정에서 35B 교사 모델을 능가하며, HotpotQA 훈련은 MuSiQue와 2WikiMultihopQA로 전이된다.

Language: ko
Time zone: Asia/Seoul
Current time (UTC, cached as of): 2026-11-22T13:22:00.000Z
Query date (Asia/Seoul): 2026-11-22

HTML: https://didcodexreset.com/ko/news/8765e117d8bf4962af57d0d5.html

Content language: ko
Localization state: translated

출처: elvis · 2026. 10. 4. 09:20:53 게시

CMU 논문 [Harness Learning Enables Generalizable Test-Time Adaptation](https://arxiv.org/abs/2609.35738)은 솔버 모델의 가중치를 바꾸는 대신 에이전트의 하네스 코드를 편집해 에이전트를 개선하는 제안 모델을 강화 학습으로 훈련한다.

제안 모델은 과제, 현재 하네스, 실행 보고서를 읽고 코드 편집을 작성한다. 보상은 수정된 하네스의 점수이며, 솔버 모델은 고정된 채로 유지된다.

훈련된 4B 제안 모델은 Reasoning Gym 단일 단계 수정에서 35B 교사 모델을 능가하며, 훈련에서 본 적 없는 과제군도 포함한다. HotpotQA에서 훈련된 제안 모델은 MuSiQue와 2WikiMultihopQA에서 하네스를 계속 개선한다.

Tags: 하네스 학습, CMU, AI 에이전트, 강화 학습, Reasoning Gym

[원문 게시물 보기](https://x.com/omarsar0/status/2106529236068819394)
