연구진이 훈련 없이 360 파노라마 이미지 및 비디오 생성을 위한 SpheRoPE 프레임워크를 공개했어요.
기존 방식은 파노라마 데이터에 대한 미세 조정이나 다단계 최적화를 필요로 했지만, SpheRoPE는 사전 훈련된 diffusion transformer에 spherical prior를 주입하는 방식으로 문제를 해결했어요.
Spherical RoPE는 기존 rotary position embedding을 대체하여 3D Cartesian 좌표로 저주파 채널을 재매개변수화하고, 고주파 채널은 정확한 주기성을 강제하는 방식으로 작동하며, 프로젝트 페이지는 GitHub에 공개됐어요.