Modellveröffentlichungen

Xiaomi open-sourct kontrollierbares Video-Soundeffekt-Modell ControlFoley – Klang „ganz nach Wunsch“

KI-Zusammenfassung

Das Xiaomi-Team für große Sprachmodellanwendungen hat das Open-Source-Modell ControlFoley zur kontrollierbaren Generierung von Video-Soundeffekten veröffentlicht, um Kontrollierbarkeitsprobleme in der Kreation zu lösen. Das Modell unterstützt einheitlich drei Aufgaben: textgeführtes Video-Dubbing, textgesteuertes Video-Dubbing und referenzaudiogesteuertes Video-Dubbing. ControlFoley erzielt Open-Source-SOTA-Ergebnisse auf mehreren Benchmarks wie VGGSound-Test; Code, Modellgewichte und eine Online-Demo sind bereits verfügbar.

Kernpunkte

  • Das Xiaomi-Team für große Sprachmodellanwendungen hat das Open-Source-Modell ControlFoley zur…
  • Das Modell unterstützt einheitlich drei Aufgaben: textgeführtes Video-Dubbing,textgesteuertes…
  • ControlFoley erzielt Open-Source-SOTA-Ergebnisse auf mehreren Benchmarks wie VGGSound-Test
  • Code,Modellgewichte und eine Online-Demo sind bereits verfügbar.

Auf einen Blick

Veröffentlicht
Aktualisiert
Quelle
IT之家·人工智能
Kategorie
Modellveröffentlichungen
KI-Bewertung
74
Original lesen Den vollständigen Artikel bei der Originalquelle lesen
Warum es wichtig ist

小米开源的 ControlFoley 把视频音效生成从“看画面配声音”推进到“按意图来”,开源 SOTA 且直接提供 Skill,做视频创作的可以上手试试。

Quelle & Urheberrecht

Dieser Artikel basiert auf kuratierten Titeln und KI-Zusammenfassungen der öffentlichen AIHOT-API, mit Quellenangabe und Rückverlinkung. Das Urheberrecht am Original liegt bei den ursprünglichen Medien und Autoren; diese Seite spiegelt keine Volltexte.

Originalartikel · AIHOT-Eintrag

Zitierhinweis

Beim Zitieren dieses Artikels bitte Titel, Datum und Permalink beibehalten und Orange News als Quelle angeben.

Orange News: Xiaomi open-sourct kontrollierbares Video-Soundeffekt-Modell ControlFoley – Klang „ganz nach Wunsch“. 29. Mai 2026. https://new.nat6.net/de/news/cmpqppxpf075oslno4jxz0h8b/

Alle ansehen →