NVIDIA Mid-Harness, TerminalBench-Lite Pass@1을 50.0%에서 68.0%로 높여
터미널 에이전트의 테스트 시점 계산에 관한 NVIDIA 논문은, GPT-5.6 Sol 검증기가 샘플링한 shell 명령 8개 가운데 고르면 TerminalBench-Lite Pass@1이 50.0%에서 68.0%로 오른다고 밝혔다. 검증기가 약할 때는 샘플을 늘려도 거의 효과가 없다.
터미널 에이전트의 테스트 시점 계산에 관한 NVIDIA 논문은, GPT-5.6 Sol 검증기가 샘플링한 shell 명령 8개 가운데 고르면 TerminalBench-Lite Pass@1이 50.0%에서 68.0%로 오른다고 밝혔다. 검증기가 약할 때는 샘플을 늘려도 거의 효과가 없다.