Real World VoiceEQ 소개: 음성 AI의 인간다운 품질 측정하기

Real World VoiceEQ는 실제 대화에서 음성 AI가 얼마나 사람답게 느껴지는지 평가하는 새로운 벤치마크로, ASR·TTS·음성 간 변환·음성 이해 전반에 걸쳐 100만 건이 넘는 인간 평가를 사용한다.

평가 결과, 음성 모델들은 점점 더 전문화되고 있으며 어떤 시스템도 모든 역량 영역에서 두각을 나타내지 못했다.

많은 모델이 대화에서 중요한 톤, 감정, 기타 비전사(audio) 단서를 아직 충분히 포착하지 못했다.

이 벤치마크는 단어 오류율이나 지연 시간 같은 기존 지표가 실제 제품에서 중요한 사용자 체감 품질을 충분히 반영하지 못한다는 점을 보여준다.