Xiaomi открыла исходный код управляемой модели генерации видеоэффектов ControlFoley — звук «как вы хотите»
ИИ-резюме
Команда прикладных больших моделей Xiaomi выпустила модель генерации управляемых видеоэффектов с открытым исходным кодом ControlFoley, призванную решить проблему управляемости в творчестве. Модель единообразно поддерживает три типа задач: озвучивание видео по текстовой подсказке, озвучивание видео с текстовым управлением и озвучивание видео с управлением по референсному аудио. ControlFoley достигла SOTA среди открытых решений на ряде бенчмарков, включая VGGSound-Test; код, веса модели и онлайн-демо уже открыты.
Ключевые моменты
- Команда прикладных больших моделей Xiaomi выпустила модель генерации управляемых видеоэффектов с…
- Модель единообразно поддерживает три типа задач: озвучивание видео по текстовой…
- ControlFoley достигла SOTA среди открытых решений на ряде бенчмарков,включая VGGSound-Test
- код,веса модели и онлайн-демо уже открыты.
Кратко
- Опубликовано
- Обновлено
- Источник
- IT之家·人工智能
- Категория
- Релизы моделей
- Оценка ИИ
- 74
小米开源的 ControlFoley 把视频音效生成从“看画面配声音”推进到“按意图来”,开源 SOTA 且直接提供 Skill,做视频创作的可以上手试试。
Источник и авторские права
Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.
Как цитировать
При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.
Orange News: Xiaomi открыла исходный код управляемой модели генерации видеоэффектов ControlFoley — звук «как вы хотите». 29 мая 2026. https://new.nat6.net/ru/news/cmpqppxpf075oslno4jxz0h8b/