Релизы моделей

Xiaomi открыла исходный код управляемой модели генерации видеоэффектов ControlFoley — звук «как вы хотите»

ИИ-резюме

Команда прикладных больших моделей Xiaomi выпустила модель генерации управляемых видеоэффектов с открытым исходным кодом ControlFoley, призванную решить проблему управляемости в творчестве. Модель единообразно поддерживает три типа задач: озвучивание видео по текстовой подсказке, озвучивание видео с текстовым управлением и озвучивание видео с управлением по референсному аудио. ControlFoley достигла SOTA среди открытых решений на ряде бенчмарков, включая VGGSound-Test; код, веса модели и онлайн-демо уже открыты.

Ключевые моменты

  • Команда прикладных больших моделей Xiaomi выпустила модель генерации управляемых видеоэффектов с…
  • Модель единообразно поддерживает три типа задач: озвучивание видео по текстовой…
  • ControlFoley достигла SOTA среди открытых решений на ряде бенчмарков,включая VGGSound-Test
  • код,веса модели и онлайн-демо уже открыты.

Кратко

Опубликовано
Обновлено
Источник
IT之家·人工智能
Категория
Релизы моделей
Оценка ИИ
74
Читать оригинал Читать полную статью в первоисточнике
Почему это важно

小米开源的 ControlFoley 把视频音效生成从“看画面配声音”推进到“按意图来”,开源 SOTA 且直接提供 Skill,做视频创作的可以上手试试。

Источник и авторские права

Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.

Оригинал статьи · Материал на AIHOT

Как цитировать

При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.

Orange News: Xiaomi открыла исходный код управляемой модели генерации видеоэффектов ControlFoley — звук «как вы хотите». 29 мая 2026. https://new.nat6.net/ru/news/cmpqppxpf075oslno4jxz0h8b/

Смотреть все →