연구진이 LLM의 성능 향상을 위한 새로운 축인 '검증'의 중요성을 강조하며 LLM-as-a-Verifier 프레임워크를 공개했어요.
LLM-as-a-Verifier는 추가 훈련 없이 에이전트 작업에 대한 세부 피드백을 제공하며, 기존 방식과 달리 토큰 로짓 분포에 대한 기댓값을 계산하여 연속적인 점수를 생성해요.
이 프레임워크는 점수 세분화, 반복 평가, 기준 분해를 통해 성능을 향상시키며, Terminal-Bench V2, SWE-Bench Verified 등 벤치마크에서 최고 성능을 달성했어요.