Blog Hugging Face menerbitkan penanda aras pertukaran kod ejen suara
Tajuk asal:Can Voice Agents Handle Bilingual Customers? Benchmarking Frontier ASR on Code-Switched Speech
Ringkasan AI
Blog Hugging Face menerbitkan penanda aras untuk ejen suara mengendalikan pertuturan pertukaran kod. Set data meliputi empat pasangan bahasa: Sepanyol-Inggeris, Perancis-Inggeris, Perancis Kanada-Inggeris dan Jerman-Inggeris, dibina berdasarkan senario sumber manusia dan pengurusan perkhidmatan IT. Tiga metrik iaitu kadar ralat perkataan, kadar ralat perkataan semantik dan kadar ralat jawapan digunakan untuk menilai tujuh sistem ASR, termasuk AssemblyAI Universal 3-Pro, Deepgram Nova 3 Multilang, ElevenLabs Scribe V2, Gemini 3 Flash, Mistral AI Voxtral Small 24B-2507, Nvidia Parakeet TDT 0.6b V3 dan OpenAI Whisper Large V3 Turbo. Penemuan utama: kos transkripsi pertukaran kod berbeza mengikut pasangan bahasa dan model; ElevenLabs Scribe V2, Gemini 3 Flash dan AssemblyAI Universal 3-Pro menunjukkan prestasi terbaik pada semua metrik. Set data dan rangka kerja ujian dikeluarkan secara sumber terbuka melalui AU-Harness.
Maklumat penting
- Blog Hugging Face menerbitkan penanda aras untuk ejen suara mengendalikan pertuturan pertukaran kod.
- Set data meliputi empat pasangan bahasa: Sepanyol-Inggeris,Perancis-Inggeris,Perancis…
- Tiga metrik iaitu kadar ralat perkataan,kadar ralat perkataan semantik dan kadar ralat jawapan…
- 6b V3 dan OpenAI Whisper Large V3 Turbo.
- Penemuan utama: kos transkripsi pertukaran kod berbeza mengikut pasangan bahasa dan model
Sekilas pandang
- Diterbitkan pada
- Dikemas kini pada
- Sumber
- Hugging Face 社区博客(混合发现)
- Kategori
- Kertas penyelidikan
- Skor AI
- 67
如果你在给多语言客户做语音Agent,这篇博客直接把主流ASR的code-switching能力测了一遍,ElevenLabs Scribe V2目前最强,还开源了数据集,拿来就能测自己的模型。
Entiti Berkaitan
Sumber dan hak cipta
Artikel ini disusun berdasarkan tajuk pilihan dan ringkasan AI daripada API awam AIHOT, dengan sumber dinyatakan dan pautan balik disediakan; hak cipta teks asal milik media dan penulis asal, laman ini tidak menyalin penuh teks penuh.
Cara memetik
Apabila memetik artikel ini, kekalkan tajuk, tarikh dan pautan kekal, serta nyatakan sumber sebagai Orange News.
Orange News: Blog Hugging Face menerbitkan penanda aras pertukaran kod ejen suara. 10 Jun 2026. https://new.nat6.net/ms/news/cmq7289uo001rsle3dbj1unbi/