음성 에이전트의 평가는 자동 음성 인식(ASR)과 단어 오류율(WER)만으로는 충분하지 않다. 현대의 상호작용형 음성 에이전트를 최적화하기 위해서는 작업 성공률, 침입 행동 및 대기시간, 그리고 소음 하에서의 환각과 같은 측면을 함께 측정해야 한다. 또한 ASR, 안전성, 지시 따르기 뿐만 아니라 일반 지식, 지시 따르기, 안전성, 환경/내용 변화에 대한 견고성을 측정하는 VoiceBench와 같은 다면적 음성 상호작용 벤치마크가 필요하다. 이러한 평가는 음성 인식 기술의 발전과 함께 계속 발전해야 하며, 사용자 경험을 향상시키기 위한 중요한 역할을 한다.

<Mark Tech Post 뉴스 본문 전체읽기>