EditVerse3D는 3D 객체 편집 시 대략적인 영역 지정을 통해 고품질 편집을 가능하게 하는 새로운 프레임워크입니다. 사용자는 3D 객체, 편집 대상 영역을 나타내는 3D 경계 상자, 원하는 수정 사항을 설명하는 2D 이미지를 입력합니다. 지역 인식 적응 손실 함수를 도입하여 학습이 어려운 영역을 강조하고, 목표 영역과 보존 영역 간의 균형을 맞춥니다.
기존 방식의 한계를 극복하기 위해, EditVerse3D는 3D 마스크, 2D 이미지, 복잡한 파이프라인 없이도 대략적인 영역 지정을 통해 3D 객체를 편집할 수 있도록 설계되었습니다. 연구진은 3D 편집 데이터셋을 구축하여 모델의 성능을 향상시켰으며, 실험 결과 기존 방식보다 시각적 품질과 정량적 성능이 우수함을 확인했습니다.