Релизы моделей

JD открыла исходный код фреймворка генерации длинных аудиовидео JoyAI-Echo

Оригинальный заголовок:京东开源JoyAI-Echo框架,进入全球第一梯队!

ИИ-резюме

3 июня JD открыла исходный код фреймворка JoyAI-Echo, решающего три проблемы генерации длинных видео: разрушение идентичности персонажа, резкую смену тембра и медленную генерацию. Фреймворк сохраняет согласованность внешности и тембра персонажа в течение 5 минут с помощью кросс-модальной аудиовидеопамяти, а постобучение на основе памяти в сочетании с технологией DMD даёт ускорение вывода примерно в 7,5 раза. Новый Director Agent поддерживает диалоговую локальную правку на естественном языке без повторного прогона всего видео. В комплекте — облегчённый модуль сверхразрешения в реальном времени, поддерживающий разрешения 736×1280→1152×1920 и 1472×2560. На оценочном наборе точность речевого содержания составила 0,8646, а по ряду показателей пользовательских предпочтений решение лидирует. Код и веса опубликованы с открытым исходным кодом на GitHub.

Ключевые моменты

  • 3 июня JD открыла исходный код фреймворка JoyAI-Echo,решающего три проблемы генерации длинных…
  • Фреймворк сохраняет согласованность внешности и тембра персонажа в течение 5 минут с помощью…
  • Новый Director Agent поддерживает диалоговую локальную правку на естественном языке без повторного…
  • В комплекте — облегчённый модуль сверхразрешения в реальном времени,поддерживающий разрешения…
  • На оценочном наборе точность речевого содержания составила 0,8646,а по ряду показателей…

Кратко

Опубликовано
Обновлено
Источник
公众号:京东JoyAI
Категория
Релизы моделей
Оценка ИИ
72
Читать оригинал Читать полную статью в первоисточнике
Почему это важно

长视频生成一直被角色崩塌和龟速生成卡死,JoyAI-Echo 开源给出了角色一致性方案和 7.5 倍加速,Director Agent 对话式编辑的思路很先进,做 AI 视频的朋友可以直接去 GitHub 开跑。

Источник и авторские права

Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.

Оригинал статьи · Материал на AIHOT

Как цитировать

При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.

Orange News: JD открыла исходный код фреймворка генерации длинных аудиовидео JoyAI-Echo. 5 июня 2026. https://new.nat6.net/ru/news/cmq642x6l0501sl5i3sl7adjt/

Смотреть все →