연구진은 비디오 디퓨전 모델을 활용하여 조명 변경을 가능하게 하는 새로운 프레임워크 'Relit-LiVE'를 개발했습니다. 이 기술은 기존 방식의 문제점인 왜곡된 모습과 시간적 오류를 개선하고 물리적으로 일관성 있는 결과를 제공합니다.
Relit-LiVE는 참조 이미지를 활용하여 장면 정보를 복구하고, 환경 맵을 예측하여 조명과 기하학적 정렬을 강화합니다. 이를 통해 동적 조명과 카메라 움직임에도 안정적인 결과를 얻을 수 있습니다.
새로운 프레임워크는 기존 기술 대비 우수한 성능을 보이며, 장면 렌더링, 재질 편집, 객체 삽입, 스트리밍 비디오 조명 변경 등 다양한 분야에 활용될 수 있습니다.