연구진이 단일 RGB 이미지에서 3D 장면을 복원하는 새로운 프레임워크 VolFill을 공개했어요. 기존 방식 대신 3D VAE와 latent Diffusion Transformer를 결합하여 숨겨진 구조를 추론합니다. SCRREAM 및 NRGB-D 데이터셋 실험 결과, 기존 방식 대비 성능이 크게 향상된 것으로 나타났어요.
VolFill은 기존 방식의 per-ray 제약이나 비정형 포인트 클라우드 쿼리 문제를 해결하고, 직접적인 표면 추출 및 점유 쿼리를 지원하는 구조화된 표현을 제공합니다. 기존 방식보다 더 강력한 공간 추론을 위해 geometry foundation 모델을 활용합니다.
연구 결과는 홀리스틱한 공간 이해를 위한 견고한 기반을 제공하며, 3D 장면 복원 분야에 새로운 가능성을 제시합니다.