Sorties de modèles

JD open source JoyAI-VL-Interaction, un modèle d'interaction visuelle et linguistique en temps réel

Résumé IA

JD a annoncé l'open source du modèle d'interaction visuelle et linguistique en temps réel JoyAI-VL-Interaction, présenté comme le premier modèle et système d'interaction entièrement open source au monde, avec un support natif vLLM-Omni dès le jour 0. Le modèle présente trois avancées : jugement proactif (observation continue du flux vidéo pour décider quand parler), réponse en temps réel (réaction immédiate au flux vidéo en cours) et délégation intelligente et opportuniste à un agent (les tâches complexes sont confiées à un modèle en arrière-plan tandis que le premier plan continue d'observer). Il prend en charge les entrées vidéo (caméra, flux en direct, flux de surveillance), l'entrée et la sortie vocales, une interface visuelle, la mémoire à long terme et le déploiement vLLM. Sur 58 cas d'évaluation à l'aveugle par des humains, le taux de victoire global atteint 77,6 % face à l'assistant d'appel vidéo Doubao et 87,9 % face à l'assistant d'appel vidéo Gemini.

Points clés

  • JD a annoncé l'open source du modèle d'interaction visuelle et linguistique en temps réel…
  • Le modèle présente trois avancées: jugement proactif (observation continue du flux vidéo pour…
  • Il prend en charge les entrées vidéo (caméra,flux en direct,flux de surveillance),l'entrée et la…
  • Sur 58 cas d'évaluation à l'aveugle par des humains,le taux de victoire global atteint 77,6 % face…

En bref

Publié
Mis à jour
Source
IT之家·人工智能
Catégorie
Sorties de modèles
Score IA
71
Lire l'original Lire l'article complet à la source d'origine
Pourquoi c'est important

京东开源了首个全栈实时视频交互模型,让大模型能持续观察并主动响应,开发者可以直接用代码搭建安防、导购等实时AI助手,实用性很强。

Entités associées

Source et droits

Cet article s'appuie sur des titres sélectionnés et des résumés IA issus de l'API publique AIHOT, avec attribution et liens de retour. Les droits sur l'original restent ceux des médias et auteurs d'origine ; ce site ne reproduit pas les textes intégraux.

Article original · Fiche AIHOT

Comment citer

Pour citer cet article, conservez le titre, la date et le lien permanent, et indiquez Orange News comme source.

Orange News : JD open source JoyAI-VL-Interaction, un modèle d'interaction visuelle et linguistique en temps réel. 22. juin 2026. https://new.nat6.net/fr/news/cmqozph2l05nlslx6ip3k2irx/

Tout voir →