연구진은 3D·4D 콘텐츠 생성 시 발생하는 공간 환각(구조 중복, 기하학적 불일치) 문제를 해결하기 위해 Hallo4D 프레임워크를 개발했어요.
Hallo4D는 생성-탐지-수정 파이프라인을 통해 다중 뷰·프레임 렌더링에서 불일치를 식별하고, 대규모 다중 모델 언어 모델(LMM)을 활용해 후보 수정안을 평가해요.
연구 결과, Hallo4D는 다양한 3D·4D 생성 환경에서 기존 방식보다 뛰어난 성능을 보이며, 모델 재학습 없이 시공간 일관성을 개선하는 효과적인 솔루션으로 입증됐어요.