Согласно информации, опубликованной на блоге Hugging Face, существующие бенчмарки указывают на то, что голосовой искусственный интеллект приближается к уровню человеческой производительности. Однако реальные разговоры показывают другую картину. Это может означать, что текущие оценки не полностью отражают реалии использования голосовых моделей в повседневной жизни.

Новая метрика Real World VoiceEQ, представленная Hugging Face, направлена на более точную оценку качества голосового искусственного интеллекта с точки зрения человеческого восприятия. Это может помочь выявить недостатки, которые не учитываются в стандартных бенчмарках, и улучшить применение голосовых моделей в реальных условиях.