Pulse · AI 뉴스

평가 능력은 최적화 유용성을 의미하지 않는다: LLM-as-a-Judge 신호의 폐쇄 루프 테이블 인식

arXiv cs.CL · 2026-07-15

연구진은 LLM-as-a-judge를 활용한 테이블 인식 작업에서 평가 능력과 최적화 유용성 간의 연관성을 분석했어요.

결과적으로 판사 신호는 약했고, 구조 보존 지침이 심각한 손실을 줄이는 데 효과적이었으며, 판사 피드백을 유지하는 경우 구조 보호 효과가 안정적으로 관찰되지 않았어요.

이 연구는 LLM 평가 능력이 최적화 유용성을 보장하지 않으며, 구조적 변화를 결정적으로 감지하는 검증 신호의 필요성을 시사해요.

##LLM##테이블인식##평가##최적화
매일 핵심 AI 소식을 한국어로, 빠르게
App Store 에서 Pulse 받기 앱에서 열기