연구진이 이미지에서 3D 형상을 추정하는 새로운 방법인 World Tracing을 발표했어요. 이 방법은 보이는 픽셀에 맞춰 3D 점을 예측하면서 가려진 영역의 기하학적 구조도 완성하는 방식이에요.
World Tracing은 WT-DiT라는 diffusion transformer를 활용하여 여러 기하학적 레이어를 분리된 토큰으로 처리하고, factorized 및 global attention을 통해 연결해요.
이 기술은 객체, 장면, 동적 환경에서 기존 방법보다 뛰어난 성능을 보이며, 텍스트 기반 3D 장면 편집, 새로운 시점 비디오 합성 등 다양한 분야에 활용될 수 있어요.