연구진이 베트남 전통 의상 아오자이를 중심으로 한 스케치-텍스트 복합 이미지 검색 벤치마크 VietFashion을 공개했어요. VietFashion은 의상 구조를 나타내는 스케치와 문화적 의미를 담은 텍스트 설명을 결합하여 문화적으로 의미 있는 의상을 검색하는 데 사용돼요.
연구팀은 650개의 스케치를 기반으로 생성 모델을 활용해 2만 1천여 개의 사진과 캡션을 생성하고, 패션 잡지에서 추출한 상세한 의상 속성을 묘사하는 텍스트 프롬프트를 활용했어요.
VietFashion은 디자인 의도의 모호성을 반영하기 위해 다중 타겟 검색 설정을 채택하고, 미세한 문화적 의미와 복합 모달 구성을 모델링하는 데 어려움이 있음을 보여주며, 정밀한 패션 검색 벤치마크로서의 가치를 입증했어요.