연구진은 파노라마 세계 모델의 장거리 메모리 문제를 해결하기 위해 PanoWorld를 제안했어요. PanoWorld는 카메라 경로를 단순화하고 Dense Panoramic Ray-Conditioning(DPRC)과 Geometry-aware Memory Augmentation(GMA)를 활용합니다. 새로운 데이터셋 World360을 구축하여 실제 영상과 AirSim360으로 생성한 영상을 포함했습니다.
World360 데이터셋에서 PanoWorld는 기존 방법보다 큰 폭으로 성능을 향상시켰어요. 모델, 학습 코드, 데이터셋은 공개될 예정입니다.
PanoWorld는 회전 등가적 특성을 활용하여 파노라마 표현의 회전을 암시적 기하 변환으로 처리합니다.