연구진은 LLM의 신뢰성 확보와 자체 개선을 위해 의미적 구간(span) 단위 불확실성 추정(SLUE)이라는 새로운 과제를 제시했어요.
SPANUQ라는 경량화된 프러브를 개발하여 다중 샘플링 추론의 불확실성 지식을 LLM의 은닉 상태를 단일 패스 방식으로 추출했어요.
SPANUQ-BENCH라는 새로운 벤치마크를 구축하여 20,000개의 프롬프트와 293,000개의 어노테이션된 구간을 포함하고, 다중 샘플 기반 검증을 통해 연속적인 소프트 라벨을 생성했어요.