논문 및 연구
DeepSeek-V4-Pro 서비스 한계 돌파: H20 기반 다중 시나리오 최적화 방법
원제목:Blog Pushing the Limits of Serving DeepSeek-V4-Pro DeepSeek-V4-Pro is a 1.6-trillion-parameter Mixture-of-Experts (MoE) model released with both FP8 and FP4 weights. Models at this scale naturally benefit from accelerators such as NVIDIA Blackwell GPU... Tianyu Zhang, Yusong Gao, Yun Zhang
AI 요약
LMSYS 팀은 1.6조 파라미터 MoE 모델 DeepSeek-V4-Pro를 H20 GPU에서 시나리오별 서비스 구성으로 B300 성능에 근접시켰다. 단일 노드 H20-141GB 참조 구현은 271 output tokens/s를 달성해 B300의 383.7 tokens/s와의 성능 격차를 1.42배로 좁혔다.
핵심 정보
LMSYS 팀은 1.
6조 파라미터 MoE 모델 DeepSeek-V4-Pro를 H20 GPU에서 시나리오별 서비스 구성으로 B300 성능에 근접시켰다.
단일 노드 H20-141GB 참조 구현은 271 output tokens/s를 달성해 B300의 383.
7 tokens/s와의 성능 격차를 1.
42배로 좁혔다.
한눈에 보기
게시
2026년 8월 19일
업데이트
2026년 11월 6일
AI 점수
73
추천 이유
文章提出按上下文长度与并发需求分场景选择 prefill/decode 配置,并用 Humming 压缩和 Online C128 释放 HBM,使 H20 也能服务 1M 上下文,为受限硬件上的大规模推理提供了可复用的工程思路。
출처 및 저작권
이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.
원문 기사
· AIHOT 항목
인용 방법
본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.
Orange News: DeepSeek-V4-Pro 서비스 한계 돌파: H20 기반 다중 시나리오 최적화 방법. 2026년 8월 19일. https://new.nat6.net/ko/news/cmt0e7sxo01eiro2o4l4y9jmh/
Orange Relay(pro.nat6.net)는 고품질 AI API 중계 서비스입니다. 합리적인 가격, 안정적인 품질, Claude·GPT·Gemini 등 주요 모델을 폭넓게 지원합니다.
Orange Relay 방문하기
Anthropic이 두 가지 실험을 공개했다. Claude(Mythos Preview와 Opus 4.8)가 15개 타깃에 대해 단백질 결합제를 설계해 14개에 성공하며 적중률 22.6%~35.1%를 기록했다.
Anthropic:Research(发表成果 · 网页) 논문 및 연구 AI 점수 73
2026년 8월 18일
에이전트 메모리는 마음대로 켜는 기능이 아니라 모델 능력에 맞춰 조절해야 하는 용량이다. 강한 모델에는 전체 가이드 세트를 주입하는 것이 적합해 DeepSeek-V3.2(671B MoE)의 작업 완료율이…
Hugging Face 社区博客(混合发现) 논문 및 연구 AI 점수 66
2026년 8월 19일
자출판 전자책 14,419권을 분석한 결과 AI 생성 도서가 품질이 아닌 수량으로 인간 저자의 시장을 잠식하고 있으며 AI 텍스트가 감지되지 않은 도서조차 도서당 수익이 감소하고 있다. 2023년 1분기부터…
The Decoder:AI News(RSS) 논문 및 연구 AI 점수 70
2026년 8월 15일
앤트 Ling Infra 팀과 RadixArk SGLang 팀이 Ling-3.0-flash 하이브리드 선형 어텐션 MoE 모델의 단일 요청 디코딩 속도를 288 tok/s에서 606 tok/s로 높이고 평균…
LMSYS Blog 논문 및 연구 AI 점수 63
2026년 8월 21일
Prime Intellect는 nanoGPT optimizer speedrun에서 18개 프런티어 모델을 대상으로 153회의 자율 실행을 진행했으며, 단일 실행 최장 8일, 실행당 8xH200을 사용했다.
Prime Intellect(网页) 논문 및 연구 AI 점수 76
2026년 8월 14일
Hugging Face의 최신 연구가 음성 인식의 벤치마크 최적화(benchmaxxing) 현상을 정량화하는 세 가지 테스트를 도입했다. 11개 오픈소스 ASR 모델 평가에서 여러 고득점 시스템이 오디오 내용과…
Hugging Face 社区博客(混合发现) 논문 및 연구 AI 점수 69
2026년 8월 21일
이전 기사 Replit, Free Mode 출시…구독 사용자 일상 작업에 credits 소모 없어
다음 기사 Paul Stack, 인간이 아키텍처를 맡고 AI가 코드를 쓰는 5인 팀 실천 공유