PhyGenHOI는 3D 인간과 객체 간의 물리적으로 정확하고 시각적으로 사실적인 4D 인간-객체 상호작용(HOI)을 생성하는 새로운 프레임워크입니다. Motion Diffusion Model(MDM)과 Material Point Method(MPM)를 결합하여 인간의 움직임과 객체의 물리 시뮬레이션을 모델링합니다.
Windowed Attraction Loss, Contact-Driven Re-simulation, Masked Video-SDS 등 세 가지 메커니즘을 통해 상호작용을 감독하여 충돌 시 물리적으로 일관된 운동량 전달을 보장합니다.
다양한 동작, 인간, 객체에 대해 기존 방식보다 뛰어난 성능을 보여줍니다. 프로젝트 페이지와 영상은 GitHub에서 확인할 수 있습니다.