Xiaomi open source ControlFoley, un modèle de génération d'effets sonores vidéo contrôlable pour un son « comme vous le souhaitez »
Résumé IA
L'équipe d'application des grands modèles de Xiaomi publie ControlFoley, un modèle open source de génération d'effets sonores vidéo contrôlable, destiné à résoudre le problème de la contrôlabilité dans la création. Le modèle prend en charge de manière unifiée trois types de tâches : le doublage vidéo guidé par texte, le doublage vidéo contrôlé par texte et le doublage vidéo contrôlé par audio de référence. ControlFoley atteint des performances SOTA open source sur plusieurs benchmarks dont VGGSound-Test ; son code, les poids du modèle et une démo en ligne sont déjà disponibles.
Points clés
- L'équipe d'application des grands modèles de Xiaomi publie ControlFoley,un modèle open source de…
- Le modèle prend en charge de manière unifiée trois types de tâches: le doublage vidéo guidé par…
- ControlFoley atteint des performances SOTA open source sur plusieurs benchmarks dont VGGSound-Test
- son code,les poids du modèle et une démo en ligne sont déjà disponibles.
En bref
- Publié
- Mis à jour
- Source
- IT之家·人工智能
- Catégorie
- Sorties de modèles
- Score IA
- 74
小米开源的 ControlFoley 把视频音效生成从“看画面配声音”推进到“按意图来”,开源 SOTA 且直接提供 Skill,做视频创作的可以上手试试。
Source et droits
Cet article s'appuie sur des titres sélectionnés et des résumés IA issus de l'API publique AIHOT, avec attribution et liens de retour. Les droits sur l'original restent ceux des médias et auteurs d'origine ; ce site ne reproduit pas les textes intégraux.
Comment citer
Pour citer cet article, conservez le titre, la date et le lien permanent, et indiquez Orange News comme source.
Orange News : Xiaomi open source ControlFoley, un modèle de génération d'effets sonores vidéo contrôlable pour un son « comme vous le souhaitez ». 29. mai 2026. https://new.nat6.net/fr/news/cmpqppxpf075oslno4jxz0h8b/