연구진이 텍스트 기반 이미지 편집 기법 DuET을 발표했어요. DuET은 이미지 편집 과정에서 일시적으로 텍스트-이미지 변환 단계를 거쳐 편집 목표 달성 및 자연스러운 결과물 구현을 돕습니다. 모델 가중치를 수정하거나 샘플링 비용을 늘리지 않고도 지시사항 관련성, 의미 충실도, 시각적 품질을 향상시킬 수 있어요.
DuET은 이미지 편집 과정에서 원본 이미지 의존도를 낮춰 편집 목표에 더 집중할 수 있도록 합니다. 텍스트-이미지 변환 단계를 거쳐 편집 과정에서 목표 분포에 더 가까워지도록 유도하며, 원본 이미지의 구조적 이점을 유지합니다. 원본 이미지 보존과 편집 충실도 간의 균형을 맞추는 것이 중요해요.