Sorties de modèles

JD ouvre le framework de génération audio-vidéo longue JoyAI-Echo

Titre original:京东开源JoyAI-Echo框架,进入全球第一梯队!

Résumé IA

Le 3 juin, JD a open source le framework JoyAI-Echo, qui résout trois difficultés majeures de la génération de vidéos longues : la dégradation de l'identité des personnages, les changements brusques de timbre et la lenteur de génération. Le framework maintient la cohérence d'apparence et de timbre des personnages sur 5 minutes grâce à une mémoire audio-vidéo intermodale ; le post-entraînement guidé par la mémoire, combiné à la technologie DMD, apporte une accélération d'inférence d'environ 7,5 fois. Un nouveau Director Agent permet des révisions locales par dialogue en langage naturel, sans relancer toute la vidéo. Un module de super-résolution temps réel léger est fourni, avec deux paliers de résolution : 736×1280→1152×1920 et 1472×2560. Sur le jeu d'évaluation, la précision du contenu vocal atteint 0,8646 et les préférences utilisateurs sont en tête sur plusieurs critères. Le code et les poids sont open source sur GitHub.

Points clés

  • Le 3 juin,JD a open source le framework JoyAI-Echo,qui résout trois difficultés majeures de la…
  • Le framework maintient la cohérence d'apparence et de timbre des personnages sur 5 minutes grâce à…
  • le post-entraînement guidé par la mémoire,combiné à la technologie DMD,apporte une accélération…
  • Un nouveau Director Agent permet des révisions locales par dialogue en langage naturel,sans…
  • Un module de super-résolution temps réel léger est fourni,avec deux paliers de résolution:…

En bref

Publié
Mis à jour
Source
公众号:京东JoyAI
Catégorie
Sorties de modèles
Score IA
72
Lire l'original Lire l'article complet à la source d'origine
Pourquoi c'est important

长视频生成一直被角色崩塌和龟速生成卡死,JoyAI-Echo 开源给出了角色一致性方案和 7.5 倍加速,Director Agent 对话式编辑的思路很先进,做 AI 视频的朋友可以直接去 GitHub 开跑。

Source et droits

Cet article s'appuie sur des titres sélectionnés et des résumés IA issus de l'API publique AIHOT, avec attribution et liens de retour. Les droits sur l'original restent ceux des médias et auteurs d'origine ; ce site ne reproduit pas les textes intégraux.

Article original · Fiche AIHOT

Comment citer

Pour citer cet article, conservez le titre, la date et le lien permanent, et indiquez Orange News comme source.

Orange News : JD ouvre le framework de génération audio-vidéo longue JoyAI-Echo. 5. juin 2026. https://new.nat6.net/fr/news/cmq642x6l0501sl5i3sl7adjt/

Tout voir →