NeoMap은 단일 이미지나 비디오에서 새로운 시점 비디오 합성을 위한 트레이닝 없는 프레임워크입니다. 기존 방식의 단점인 아티팩트와 장면 일관성 문제를 해결합니다. 연구진은 사전 훈련된 비디오 모델의 데이터 내에 최적의 새로운 시점 솔루션이 이미 존재한다는 점에 착안했습니다.
NeoMap은 사전 훈련된 비디오 모델에서 고품질의 일관성 있는 새로운 시점 솔루션을 찾기 위해 반복적인 투영 방식을 사용합니다. Tanks-and-Temples, LLFF, DAVIS 데이터셋에서 기존 방식보다 뛰어난 성능을 보였습니다.
NeoMap은 기존 방식 대비 생성 품질과 시점 일관성 모두에서 최고 수준의 결과를 달성했습니다.