Symbal은 MLLM이 생성한 이미지 캡션에서 체계적인 오정렬 오류를 감지하는 새로운 방법입니다.
Symbal은 기존 모델을 활용해 체계적 오정렬을 식별하고 자연어로 결과를 요약하는 2단계 구조를 사용합니다.
SymbalBench는 체계적 오정렬 감지 평가를 위한 벤치마크로, 자연 및 의료 이미지 170만 쌍을 포함합니다.
Symbal은 SymbalBench에서 63.8%의 정확도를 보여 가장 가까운 기준 모델보다 4배 높은 성능을 보였습니다.