연구진이 논리 퍼즐을 활용한 새로운 벤치마크와 추론 그래프 분석 파이프라인을 개발했어요. 기존 평가 방식으로는 알 수 없었던 모델의 추론 구조 차이를 정량적으로 분석할 수 있게 됐어요. 새로운 '추론 효율성' 지표를 통해 모델의 논리적 흐름 집중도를 측정하고, 기존 지표로 구분되지 않던 모델 간 차이를 발견했어요.
추론 효율성 지표 분석 결과, 토큰 수와 정확도만으로는 파악하기 어려웠던 모델의 실패 원인과 난이도에 따른 추론 방식 변화를 진단할 수 있는 실질적인 도구를 마련했어요. 연구는 오픈소스 추론 모델에 적용됐으며, 모델의 구조적 특징을 파악하는 데 기여할 것으로 기대돼요.