REST3D는 단일 RGB 이미지에서 물리적으로 안정적인 3D 장면을 재구성하는 프레임워크입니다. 기존 방법은 물리적 구조를 제대로 반영하지 못해 부유나 관통 같은 오류를 발생시키고, 이미지 기반 생성 방법은 정확도가 떨어지는 경우가 많습니다.
REST3D는 중력과 지지 관점을 고려한 장면 트리를 구축하여 물리적 구조를 이해하고, 이미지-3D 모델을 활용해 초기 장면을 생성합니다. 이후 장면 트리 가이드와 물리 기반 최적화를 통해 물리적 오류를 줄이고 시각적 일관성을 유지합니다.
합성 및 실제 데이터셋에서 물리적 오류 감소와 시뮬레이션 안정성 향상을 입증했으며, VR 환경에서 인간-객체 상호작용 데모를 통해 몰입형 애플리케이션 가능성을 보여주었습니다.