Lanzamientos de modelos

JD.com abre el código de JoyAI-Echo, un framework de generación de audio y vídeo de larga duración

Título original:京东开源JoyAI-Echo框架,进入全球第一梯队!

Resumen de IA

El 3 de junio, JD.com abrió el código del framework JoyAI-Echo, que resuelve tres problemas de la generación de vídeo de larga duración: la degradación de la identidad de los personajes, los cambios bruscos de timbre y la lentitud de generación. El framework mantiene la coherencia de apariencia y timbre de los personajes durante 5 minutos mediante una memoria audiovisual multimodal, y su post-entrenamiento guiado por memoria combinado con la tecnología DMD aporta una aceleración de inferencia de unas 7,5 veces. Incorpora un Director Agent que permite revisiones locales mediante diálogo en lenguaje natural sin volver a generar todo el vídeo. Incluye un módulo ligero de superresolución en tiempo real compatible con dos resoluciones: 736×1280→1152×1920 y 1472×2560. En el conjunto de evaluación, la precisión del contenido de voz alcanza 0,8646 y lidera en varios aspectos de preferencia de los usuarios. El código y los pesos ya son de código abierto en GitHub.

Puntos clave

  • El 3 de junio,JD.
  • com abrió el código del framework JoyAI-Echo,que resuelve tres problemas de la generación de vídeo…
  • El framework mantiene la coherencia de apariencia y timbre de los personajes durante 5 minutos…
  • Incorpora un Director Agent que permite revisiones locales mediante diálogo en lenguaje natural…
  • Incluye un módulo ligero de superresolución en tiempo real compatible con dos resoluciones:…

Resumen rápido

Publicado
Actualizado
Fuente
公众号:京东JoyAI
Categoría
Lanzamientos de modelos
Puntuación IA
72
Leer el original Leer el artículo completo en la fuente original
Por qué importa

长视频生成一直被角色崩塌和龟速生成卡死,JoyAI-Echo 开源给出了角色一致性方案和 7.5 倍加速,Director Agent 对话式编辑的思路很先进,做 AI 视频的朋友可以直接去 GitHub 开跑。

Fuente y derechos

Este artículo se basa en títulos seleccionados y resúmenes de IA de la API pública de AIHOT, con atribución y enlaces de vuelta. Los derechos del original pertenecen a los medios y autores originales; este sitio no reproduce textos completos.

Artículo original · Ficha de AIHOT

Cómo citar

Al citar este artículo, conserva el título, la fecha y el enlace permanente, e indica que la fuente es Orange News.

Orange News: JD.com abre el código de JoyAI-Echo, un framework de generación de audio y vídeo de larga duración. 5. junio 2026. https://new.nat6.net/es/news/cmq642x6l0501sl5i3sl7adjt/

Ver todo →