연구진이 다국어 다속성 지시 기반 음성 편집 벤치마크인 SpeechEditBench를 공개했어요.
SpeechEditBench는 7가지 원자 편집 작업과 여러 작업을 통합한 복합 편집 작업을 포함하며, 목표 속성 편집 성공률과 불필요한 속성 보존 성공률을 평가하는 새로운 프로토콜을 제시해요.
벤치마크 결과, 현재 모델은 모든 편집 차원에서 뛰어난 성능을 보이지 않으며, 복합 편집은 여전히 매우 어렵고, 상용 모델이 오픈 소스 모델보다 우수한 성능을 보여요.