연구진은 일상적인 단안 비디오를 활용해 재사용 가능한 4D 상호작용 원시 데이터를 구축하는 방법을 제시했어요. 이는 실제 상호작용 데이터 마이닝을 가능하게 하고, 장면 인지 합성 및 계획을 지원할 수 있어요.
CHOIR은 접촉을 명시적인 결합 신호로 활용하여 단안 카메라로 손-객체 상호작용(HOI)을 재구성하는 프레임워크예요. 기존 방식은 알려진 객체나 큐레이션된 장면을 전제로 하지만, CHOIR은 복잡한 환경에서도 정확한 재구성을 목표로 해요.
실험 결과, CHOIR은 객체 재구성, 물리적 타당성, 시간적 일관성을 향상시켜 기존 방식보다 우수한 성능을 보여줬어요.