vLLM, Mistral Large 4 Day 0 지원 발표
원제목:Day 0 support for Mistral Large 4 on vLLM
AI 요약
vLLM 팀이 Mistral의 새 플래그십 모델 Mistral Large 4에 대한 Day 0 지원을 발표했다. 이 모델은 1T 파라미터에 토큰당 49B를 활성화하는 네이티브 멀티모달 MoE 모델로 MLA 희소 어텐션과 DSA top-k 인덱서, 크로스 레이어 KV 공유, NoPE, SSMax, LeRoPE 등 새 아키텍처를 채택했으며 DSpark 추측 디코딩 드래프터와 Pixtral 비전 인코더를 내장했다.
핵심 정보
- vLLM 팀이 Mistral의 새 플래그십 모델 Mistral Large 4에 대한 Day 0 지원을 발표했다.
- 이 모델은 1T 파라미터에 토큰당 49B를 활성화하는 네이티브 멀티모달 MoE 모델로 MLA 희소 어텐션과 DSA top-k 인덱서,크로스 레이어 KV 공유
- LeRoPE 등 새 아키텍처를 채택했으며 DSpark 추측 디코딩 드래프터와 Pixtral 비전 인코더를 내장했다.
한눈에 보기
- 게시
- 업데이트
- 카테고리
- 제품 및 앱
- AI 점수
- 71
추천 이유
vLLM 团队详解支持 Mistral Large 4 所需的架构适配与量化、长上下文、推测解码等实测数据,可作部署参考。
관련 엔티티
출처 및 저작권
이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.
인용 방법
본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.
Orange News: vLLM, Mistral Large 4 Day 0 지원 발표. 2026년 10월 29일. https://new.nat6.net/ko/news/x6x8nkxn5mqc55umit3clj1tf/