Hume AI가 음성 AI의 실제 품질을 측정하는 벤치마크 'Real World VoiceEQ'를 공개했어요. 기존 벤치마크는 음성 AI의 성능을 과대평가하는 경향이 있다고 지적했어요.
Real World VoiceEQ는 음성 인식, 텍스트 음성 변환, 음성-음성 변환 등 40개 이상의 모델을 평가하며, 15개 이상의 평가 항목과 60개 이상의 지표를 사용해요.
이번 벤치마크는 다양한 환경에서 수집된 78만 건의 TTS 평가와 4만 8천 건의 STS 평가를 포함하며, 음성 AI 인간 평가 중 최대 규모예요. 음성 AI는 고객 지원, 의료, 교육 등 다양한 분야에서 텍스트를 대체하며 중요성이 커지고 있어요.