Sorties de modèles

Xiaomi open source ControlFoley, un modèle de génération d'effets sonores vidéo contrôlable pour un son « comme vous le souhaitez »

Résumé IA

L'équipe d'application des grands modèles de Xiaomi publie ControlFoley, un modèle open source de génération d'effets sonores vidéo contrôlable, destiné à résoudre le problème de la contrôlabilité dans la création. Le modèle prend en charge de manière unifiée trois types de tâches : le doublage vidéo guidé par texte, le doublage vidéo contrôlé par texte et le doublage vidéo contrôlé par audio de référence. ControlFoley atteint des performances SOTA open source sur plusieurs benchmarks dont VGGSound-Test ; son code, les poids du modèle et une démo en ligne sont déjà disponibles.

Points clés

  • L'équipe d'application des grands modèles de Xiaomi publie ControlFoley,un modèle open source de…
  • Le modèle prend en charge de manière unifiée trois types de tâches: le doublage vidéo guidé par…
  • ControlFoley atteint des performances SOTA open source sur plusieurs benchmarks dont VGGSound-Test
  • son code,les poids du modèle et une démo en ligne sont déjà disponibles.

En bref

Publié
Mis à jour
Source
IT之家·人工智能
Catégorie
Sorties de modèles
Score IA
74
Lire l'original Lire l'article complet à la source d'origine
Pourquoi c'est important

小米开源的 ControlFoley 把视频音效生成从“看画面配声音”推进到“按意图来”,开源 SOTA 且直接提供 Skill,做视频创作的可以上手试试。

Source et droits

Cet article s'appuie sur des titres sélectionnés et des résumés IA issus de l'API publique AIHOT, avec attribution et liens de retour. Les droits sur l'original restent ceux des médias et auteurs d'origine ; ce site ne reproduit pas les textes intégraux.

Article original · Fiche AIHOT

Comment citer

Pour citer cet article, conservez le titre, la date et le lien permanent, et indiquez Orange News comme source.

Orange News : Xiaomi open source ControlFoley, un modèle de génération d'effets sonores vidéo contrôlable pour un son « comme vous le souhaitez ». 29. mai 2026. https://new.nat6.net/fr/news/cmpqppxpf075oslno4jxz0h8b/

Tout voir →