본 연구는 시각적 객체 지시 벤치마크에서 객체가 항상 존재하는 것을 전제로 하지만, 실제로는 의미가 일치하지 않는 경우 모델이 부분적으로만 표현을 만족하는 근사적 행동을 보인다는 점에 주목합니다.
반사실적 오류의 원인을 밝히기 위해, 객체 또는 문맥 구성 요소를 미리 정의된 임베딩 유사성 간격 내에서 체계적으로 교란하는 새로운 프로토콜을 도입했습니다.
실험 결과, 임베딩 공간의 이방성이 반사실적 오류를 설명하지 못한다는 것을 확인했으며, 모델의 신뢰성과 해석 가능성을 향상시키기 위해서는 더 세밀한 기하학적 특성을 조사해야 합니다.