Xiaomi open-sourct kontrollierbares Video-Soundeffekt-Modell ControlFoley – Klang „ganz nach Wunsch“
KI-Zusammenfassung
Das Xiaomi-Team für große Sprachmodellanwendungen hat das Open-Source-Modell ControlFoley zur kontrollierbaren Generierung von Video-Soundeffekten veröffentlicht, um Kontrollierbarkeitsprobleme in der Kreation zu lösen. Das Modell unterstützt einheitlich drei Aufgaben: textgeführtes Video-Dubbing, textgesteuertes Video-Dubbing und referenzaudiogesteuertes Video-Dubbing. ControlFoley erzielt Open-Source-SOTA-Ergebnisse auf mehreren Benchmarks wie VGGSound-Test; Code, Modellgewichte und eine Online-Demo sind bereits verfügbar.
Kernpunkte
- Das Xiaomi-Team für große Sprachmodellanwendungen hat das Open-Source-Modell ControlFoley zur…
- Das Modell unterstützt einheitlich drei Aufgaben: textgeführtes Video-Dubbing,textgesteuertes…
- ControlFoley erzielt Open-Source-SOTA-Ergebnisse auf mehreren Benchmarks wie VGGSound-Test
- Code,Modellgewichte und eine Online-Demo sind bereits verfügbar.
Auf einen Blick
- Veröffentlicht
- Aktualisiert
- Quelle
- IT之家·人工智能
- Kategorie
- Modellveröffentlichungen
- KI-Bewertung
- 74
小米开源的 ControlFoley 把视频音效生成从“看画面配声音”推进到“按意图来”,开源 SOTA 且直接提供 Skill,做视频创作的可以上手试试。
Quelle & Urheberrecht
Dieser Artikel basiert auf kuratierten Titeln und KI-Zusammenfassungen der öffentlichen AIHOT-API, mit Quellenangabe und Rückverlinkung. Das Urheberrecht am Original liegt bei den ursprünglichen Medien und Autoren; diese Seite spiegelt keine Volltexte.
Zitierhinweis
Beim Zitieren dieses Artikels bitte Titel, Datum und Permalink beibehalten und Orange News als Quelle angeben.
Orange News: Xiaomi open-sourct kontrollierbares Video-Soundeffekt-Modell ControlFoley – Klang „ganz nach Wunsch“. 29. Mai 2026. https://new.nat6.net/de/news/cmpqppxpf075oslno4jxz0h8b/