연구진이 시공간 추론을 위한 기하학적 정보 활용 방식의 한계를 지적하며 GeoWeaver 프레임워크를 공개했어요.
GeoWeaver는 각 시각적 토큰의 역할에 따라 필요한 기하학적 정보를 선택적으로 활용하는 토큰 적응형 기하학적 증거 할당 방식을 사용해요.
기존 방식과 달리, GeoWeaver는 언어 모델링 전에 시각적 토큰에 기하학적 정보를 통합하여 기하학 기반의 표현을 생성해요.
실험 결과, GeoWeaver는 공간 추론 벤치마크에서 성능을 향상시키며, 일반적인 다중 모달 기능도 유지하는 것으로 나타났어요.