연구진이 Image2Sim이라는 새로운 신경 시뮬레이션 프레임워크를 공개했어요. 이 프레임워크는 RGB-D 이미지 시퀀스를 활용해 고품질 인터랙티브 환경을 구축합니다.
Image2Sim은 3D 공간 좌표와 사실적인 시각 정보를 분리하여 3D feature-Gaussian 표현을 생성하고, Geometry-Aware One-Step Pixel Flow 모델로 고품질 RGB-D 이미지를 렌더링합니다.
Image2Sim은 20,000개 이상의 인터랙티브 장면을 생성하고 1,000만 개 이상의 내비게이션 학습 샘플을 합성하여, 기존 벤치마크에서 성능을 향상시키고 실제 환경에서도 효과적으로 적용 가능함을 입증했어요.