모델 출시

징둥, JoyAI-Echo 장편 오디오·비디오 생성 프레임워크 오픈소스 공개

원제목:京东开源JoyAI-Echo框架,进入全球第一梯队!

AI 요약

6월 3일 징둥이 JoyAI-Echo 프레임워크를 오픈소스로 공개해 장편 비디오 생성의 캐릭터 정체성 붕괴, 음색 급변, 생성 지연이라는 세 가지 난제를 해결했다. 이 프레임워크는 크로스모달 오디오·비디오 메모리 뱅크로 5분 이내 캐릭터 외형과 음색 일관성을 유지하며, 메모리 기반 후속 훈련에 DMD 기술을 결합해 추론 속도를 약 7.5배 높였다. 새로 추가된 Director Agent는 자연어 대화식 부분 수정을 지원해 전체 비디오를 다시 생성할 필요가 없다. 경량 실시간 초해상도 모듈도 함께 제공해 736×1280→1152×1920 및 1472×2560 두 단계 해상도를 지원한다. 평가 세트에서 음성 내용 정확도 0.8646을 기록했고 사용자 선호도에서도 여러 항목이 앞섰다. 코드와 가중치는 GitHub에 오픈소스로 공개됐다.

핵심 정보

  • 6월 3일 징둥이 JoyAI-Echo 프레임워크를 오픈소스로 공개해 장편 비디오 생성의 캐릭터 정체성 붕괴,음색 급변,생성 지연이라는 세 가지 난제를 해결했다.
  • 이 프레임워크는 크로스모달 오디오·비디오 메모리 뱅크로 5분 이내 캐릭터 외형과 음색 일관성을 유지하며,메모리 기반 후속 훈련에 DMD 기술을 결합해 추론 속도를 약 7.
  • 새로 추가된 Director Agent는 자연어 대화식 부분 수정을 지원해 전체 비디오를 다시 생성할 필요가 없다.
  • 경량 실시간 초해상도 모듈도 함께 제공해 736×1280→1152×1920 및 1472×2560 두 단계 해상도를 지원한다.
  • 평가 세트에서 음성 내용 정확도 0.

한눈에 보기

게시
업데이트
출처
公众号:京东JoyAI
카테고리
모델 출시
AI 점수
72
원문 읽기 정보 출처에서 전체 본문 읽기
추천 이유

长视频生成一直被角色崩塌和龟速生成卡死,JoyAI-Echo 开源给出了角色一致性方案和 7.5 倍加速,Director Agent 对话式编辑的思路很先进,做 AI 视频的朋友可以直接去 GitHub 开跑。

출처 및 저작권

이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.

원문 기사 · AIHOT 항목

인용 방법

본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.

Orange News: 징둥, JoyAI-Echo 장편 오디오·비디오 생성 프레임워크 오픈소스 공개. 2026년 6월 5일. https://new.nat6.net/ko/news/cmq642x6l0501sl5i3sl7adjt/

전체 보기 →