MAGiSt3R은 단안 RGB 비디오의 3D 재구성과 카메라 추적을 거의 10 FPS로 수행하는 멀티 에이전트 프레임워크입니다. 이 프레임워크는 RGB 비디오를 처리하고 로컬 포인트 맵을 예측하는 3R 패밀리의 피드포워드 모델과 로컬 맵을 결합하는 MAGMA 모델을 사용합니다.
MAGMA 모델은 에이전트 내부 및 에이전트 간 수준에서 로컬 맵을 결합하여 최종 글로벌 포인트 맵을 얻습니다. 또한, MAGiSt3R은 피드포워드 파이프라인에서 발생하는 누적 카메라 드리프트를 완화하기 위해 포즈 그래프 최적화를 수행합니다.
합성 및 실제 데이터셋에서 MAGiSt3R을 평가한 결과, 최첨단 방식에 비해 우수한 재구성 및 카메라 추적 정확도를 보여주었습니다.