연구진이 임상 음성 AI 성능을 평가하는 벤치마크 'SpeechDx'를 공개했어요. 12개 데이터셋, 27개 작업으로 구성되어 있으며, 개념화·조형·발음 등 음성 생성 단계를 기준으로 작업 분류를 지원해요. 12개 최첨단 오디오 인코더를 평가한 결과, 대규모 음성 모델이 가장 강력한 기준선임을 확인했어요.
SpeechDx는 다양한 건강 상태를 아우르며, 데이터셋 특이성을 구분하고 임상적으로 의미 있는 패턴을 파악하는 데 도움을 줘요. 기존 모델은 유사한 작업에서만 성능 향상을 보였고, 임상 음성 환경 전반에 걸쳐 신뢰성 있는 일반화가 어렵다는 점이 확인됐어요.
SpeechDx는 임상 음성 표현의 발전을 추적하기 위한 공유 평가 프레임워크를 제공하며, 향후 임상 음성 AI 연구에 기여할 것으로 기대돼요.