모델 출시

대규모 언어 모델을 '문답형'에서 '보면서 말하기'로, 징둥 실시간 비디오 비전-언어 인터랙션 모델 JoyAI-VL-Interaction 오픈소스 공개

AI 요약

징둥은 실시간 비디오 비전-언어 인터랙션 모델 JoyAI-VL-Interaction을 오픈소스로 공개했다고 발표했다. 이는 세계 최초의 풀스택 오픈소스 interaction 모델 및 시스템으로, vLLM-Omni day-0 네이티브 지원을 받는다. 이 모델은 세 가지 돌파구를 갖춘다. 능동 판단(비디오 스트림을 지속 관찰하며 언제 말할지 자율 결정), 실시간 응답(현재 진행 중인 비디오 스트림에 즉시 응답), 적시 에이전트 위임(복잡한 작업을 백그라운드 모델로 넘기고 포그라운드는 계속 관찰). 카메라, 라이브 스트림, 모니터링 스트림 등 비디오 입력과 음성 입출력, 시각화 인터페이스, 장기 기억, vLLM 배포를 지원한다. 58건의 실제 인물 블라인드 평가에서 더우바오 영상통화 어시스턴트 대비 종합 승률 77.6%, Gemini 영상통화 어시스턴트 대비 종합 승률 87.9%를 기록했다.

핵심 정보

  • 징둥은 실시간 비디오 비전-언어 인터랙션 모델 JoyAI-VL-Interaction을 오픈소스로 공개했다고 발표했다.
  • 이는 세계 최초의 풀스택 오픈소스 interaction 모델 및 시스템으로,vLLM-Omni day-0 네이티브 지원을 받는다.
  • 이 모델은 세 가지 돌파구를 갖춘다.
  • 능동 판단(비디오 스트림을 지속 관찰하며 언제 말할지 자율 결정),실시간 응답(현재 진행 중인 비디오 스트림에 즉시 응답),적시 에이전트 위임(복잡한 작업을 백그라운드 모델로…
  • 카메라,라이브 스트림,모니터링 스트림 등 비디오 입력과 음성 입출력,시각화 인터페이스,장기 기억,vLLM 배포를 지원한다.

한눈에 보기

게시
업데이트
출처
IT之家·人工智能
카테고리
모델 출시
AI 점수
71
원문 읽기 정보 출처에서 전체 본문 읽기
추천 이유

京东开源了首个全栈实时视频交互模型,让大模型能持续观察并主动响应,开发者可以直接用代码搭建安防、导购等实时AI助手,实用性很强。

관련 엔티티

출처 및 저작권

이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.

원문 기사 · AIHOT 항목

인용 방법

본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.

Orange News: 대규모 언어 모델을 '문답형'에서 '보면서 말하기'로, 징둥 실시간 비디오 비전-언어 인터랙션 모델 JoyAI-VL-Interaction 오픈소스 공개. 2026년 6월 22일. https://new.nat6.net/ko/news/cmqozph2l05nlslx6ip3k2irx/

전체 보기 →