연구진이 위성 이미지 기반 도시 탄소 배출 예측 정확도를 높이는 CarbonCLIP 프레임워크를 제안했어요.
CarbonCLIP은 거리뷰 이미지에서 생성된 텍스트 설명을 활용해 건물 기능, 기반 시설, 도시 활동에 대한 의미론적 정보를 제공하고, 월별 배출량 변화를 고려한 시간 맥락을 활용해요.
사전 학습 단계에서만 다중 모드 데이터를 사용하며, 추론 시에는 위성 이미지만으로 작동하여 데이터 부족 문제를 해결하고 베이징과 싱가포르에서 기존 방법보다 성능이 우수했어요.