製品とアプリ

vLLM、TML Inkling の Day-0 サポートを実現し推論性能を最適化

原題:TML Inkling on vLLM: Day-0 Support with Optimized Performance

AI 要約

vLLM は Thinking Machines Lab の 1T パラメータマルチモーダルモデル TML Inkling の Day-0 サポートを発表した。thinkingmachines/Inkling-NVFP4 と BF16 の 2 バージョンをカバーし、テキスト、画像、音声入力と最大 1M トークンのコンテキストをサポートする。

要点

  • vLLM は Thinking Machines Lab の 1T パラメータマルチモーダルモデル TML Inkling の Day-0 サポートを発表した。
  • thinkingmachines/Inkling-NVFP4 と BF16 の 2 バージョンをカバーし
  • 音声入力と最大 1M トークンのコンテキストをサポートする

概要

公開日時
更新日時
出典
vLLM 官方博客(RSS)
カテゴリ
製品とアプリ
AI スコア
74
原文を読む 情報源で全文を読む
おすすめの理由

原文给出 Day-0 支持的具体性能数字、架构优化细节和精度对比,读者可以评估该模型在自己的推理工作流中的可用性。

出典と著作権

本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。

原文記事 · AIHOT 記事

引用方法

本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。

Orange News:vLLM、TML Inkling の Day-0 サポートを実現し推論性能を最適化。2026年7月15日。https://new.nat6.net/ja/news/cmtym20dg000qrovu8y7mff6t/

すべて見る →