Sorties de modèles

JD open source l'ensemble de la pile JoyAI-VL-Interaction, du « question-réponse » au « commentaire en direct »

Titre original:京东全栈开源JoyAI-VL-Interaction,让大模型从“一问一答”走向“边看边说”

Résumé IA

JD a récemment open source JoyAI-VL-Interaction, présenté comme le premier modèle d'interaction entièrement open source au monde, avec un support natif de vLLM-Omni. Le modèle observe en continu un flux vidéo, identifie proactivement les événements clés et réagit en temps réel, et peut déléguer des tâches complexes à un agent en arrière-plan. Sur 58 évaluations à l'aveugle par des humains, il atteint un taux de victoire de 77,6 % face à l'assistant d'appel vidéo Doubao et de 87,9 % face à l'assistant d'appel vidéo Gemini, avec 100 % de victoires dans les scénarios d'alerte de surveillance. L'open source comprend les poids du modèle, le jeu de données d'interaction, le schéma d'entraînement et un système complet déployable ; il prend en charge les entrées vidéo (caméra, flux en direct), l'interaction vocale, la mémoire à long terme et le déploiement vLLM, pour des scénarios temps réel comme la surveillance de sécurité, la surveillance des personnes âgées ou les commentaires en direct.

Points clés

  • JD a récemment open source JoyAI-VL-Interaction,présenté comme le premier modèle d'interaction…
  • Le modèle observe en continu un flux vidéo,identifie proactivement les événements clés et réagit…
  • Sur 58 évaluations à l'aveugle par des humains,il atteint un taux de victoire de 77,6 % face à…
  • L'open source comprend les poids du modèle,le jeu de données d'interaction,le schéma…
  • il prend en charge les entrées vidéo (caméra,flux en direct),l'interaction vocale,la mémoire à…

En bref

Publié
Mis à jour
Source
公众号:京东JoyAI
Catégorie
Sorties de modèles
Score IA
73
Lire l'original Lire l'article complet à la source d'origine
Pourquoi c'est important

京东这个实时交互模型不是又一个刷榜模型,它把「什么时候该说话」变成了模型自己的判断。全栈开源且对比豆包、Gemini 胜率惊人,做安防、看护、直播的开发者可以直接试了。

Entités associées

Source et droits

Cet article s'appuie sur des titres sélectionnés et des résumés IA issus de l'API publique AIHOT, avec attribution et liens de retour. Les droits sur l'original restent ceux des médias et auteurs d'origine ; ce site ne reproduit pas les textes intégraux.

Article original · Fiche AIHOT

Comment citer

Pour citer cet article, conservez le titre, la date et le lien permanent, et indiquez Orange News comme source.

Orange News : JD open source l'ensemble de la pile JoyAI-VL-Interaction, du « question-réponse » au « commentaire en direct ». 23. juin 2026. https://new.nat6.net/fr/news/cmqq8ww0e07m4slp5mk5snl0z/

Tout voir →