Artículos e investigación

Hugging Face publica un benchmark de cambio de código para agentes de voz

Título original:Can Voice Agents Handle Bilingual Customers? Benchmarking Frontier ASR on Code-Switched Speech

Resumen de IA

Hugging Face publica en su blog un benchmark sobre cómo los agentes de voz procesan el habla con cambio de código. El conjunto de datos cubre cuatro pares de idiomas: español-inglés, francés-inglés, francés canadiense-inglés y alemán-inglés, y se construyó a partir de escenarios de recursos humanos y gestión de servicios de TI. Se evaluaron siete sistemas ASR con tres métricas: tasa de error de palabras, tasa de error de palabras semántica y tasa de error de respuestas, entre ellos AssemblyAI Universal 3-Pro, Deepgram Nova 3 Multilang, ElevenLabs Scribe V2, Gemini 3 Flash, Mistral AI Voxtral Small 24B-2507, Nvidia Parakeet TDT 0.6b V3 y OpenAI Whisper Large V3 Turbo. Hallazgos principales: el coste de transcripción con cambio de código varía según el par de idiomas y el modelo; ElevenLabs Scribe V2, Gemini 3 Flash y AssemblyAI Universal 3-Pro obtuvieron los mejores resultados en todas las métricas. El conjunto de datos y el marco de pruebas se publican como código abierto mediante AU-Harness.

Puntos clave

  • Hugging Face publica en su blog un benchmark sobre cómo los agentes de voz procesan el habla con…
  • El conjunto de datos cubre cuatro pares de idiomas: español-inglés,francés-inglés,francés…
  • Se evaluaron siete sistemas ASR con tres métricas: tasa de error de palabras,tasa de error de…
  • 6b V3 y OpenAI Whisper Large V3 Turbo.
  • Hallazgos principales: el coste de transcripción con cambio de código varía según el par de…

Resumen rápido

Publicado
Actualizado
Fuente
Hugging Face 社区博客(混合发现)
Categoría
Artículos e investigación
Puntuación IA
67
Leer el original Leer el artículo completo en la fuente original
Por qué importa

如果你在给多语言客户做语音Agent,这篇博客直接把主流ASR的code-switching能力测了一遍,ElevenLabs Scribe V2目前最强,还开源了数据集,拿来就能测自己的模型。

Entidades relacionadas

Fuente y derechos

Este artículo se basa en títulos seleccionados y resúmenes de IA de la API pública de AIHOT, con atribución y enlaces de vuelta. Los derechos del original pertenecen a los medios y autores originales; este sitio no reproduce textos completos.

Artículo original · Ficha de AIHOT

Cómo citar

Al citar este artículo, conserva el título, la fecha y el enlace permanente, e indica que la fuente es Orange News.

Orange News: Hugging Face publica un benchmark de cambio de código para agentes de voz. 10. junio 2026. https://new.nat6.net/es/news/cmq7289uo001rsle3dbj1unbi/

Ver todo →