Pulse · AI 뉴스

이미지 검색을 할 수 있는 검색 헤드? 긴 컨텍스트 비전-언어 모델의 다중 모드 검색 헤드

Qwen · 2026-05-27

연구진은 긴 컨텍스트를 처리하는 비전-언어 모델에서 텍스트와 이미지를 모두 활용하는 검색 헤드(retrieval head)의 작동 방식을 분석했어요.

분석 결과, 전체 헤드 중 4.4~10.2%만이 정보 검색에 핵심적인 역할을 하며, 이 헤드들을 마스킹하면 성능이 크게 저하돼요.

이미지 검색 헤드는 텍스트 검색 헤드보다 더 역동적으로 변하며, 시각적으로 풍부한 문서를 순위화하는 데에도 활용될 수 있어요.

##비전언어모델##검색헤드##이미지검색##Qwen
매일 핵심 AI 소식을 한국어로, 빠르게
App Store 에서 Pulse 받기 앱에서 열기