연구진이 RGB 이미지만으로 적외선, 편광, 다중 분광 이미지 등 다중 모드 렌더링을 예측하는 SPoILeR 모델을 개발했어요. SPoILeR은 다중 모드 간 상관관계를 학습하는 사전 훈련 단계를 거쳐 RGB 이미지로만 세밀 조정돼요.
기존 방식이 고가의 센서와 복잡한 설정이 필요했지만, SPoILeR은 RGB 이미지만으로 다중 모드 렌더링을 예측할 수 있어 비용 효율적이에요.
실험 결과, SPoILeR은 적외선, 편광, 다중 분광 프레임을 정확하게 렌더링할 수 있음을 입증했어요.