연구진은 기존 인공신경망(ANN)의 단점을 보완하기 위해 스파이킹 신경망(SNN) 기반 이미지 융합 기술 CIS-Fuse를 제안했어요.
CIS-Fuse는 두 가지 모달리티의 정보를 융합할 때, 임계값 이하의 미세한 신호까지 활용하기 위해 막전위 수준에서 교차 모달 융합을 수행해요.
CIS-Fuse는 기존 ANN 기반 방법과 동등한 융합 품질을 달성하면서 스파이킹 기반 연산의 에너지 효율성을 상속하며, 유사한 크기의 ANN 기반 방법보다 추론 에너지 소비량이 약 10배 적어요.