Miles triển khai giải pháp học tăng cường MXFP8 đầu-cuối và NVFP4 theo từng token trên kiến trúc Blackwell
Tiêu đề gốc:Blog Towards Blackwell-Native 8-bit and 4-bit RL: End-to-End MXFP8 and NVFP4 RL in Miles TL;DR: We implemented two Blackwell-native RL recipes in Miles: end-to-end MXFP8 and per-token NVFP4 for MoE experts. Both are supported by fine-grained precision control across checkpoint conversion,... Ziang Li, humans& and Miles Team
Tóm tắt AI
Nhóm Miles đã triển khai hai giải pháp học tăng cường độ chính xác thấp gốc trên kiến trúc Blackwell: MXFP8 đầu-cuối và NVFP4 theo từng token cho trọng số chuyên gia MoE. Trong thí nghiệm loại bỏ thành phần trên Qwen3-30B-A3B với 8x B200, đường cong phần thưởng gốc của BF16 và cả năm cấu hình độ chính xác thấp gần như trùng khớp, và MXFP8 cùng NVFP4 giảm thời gian suy luận.
Thông tin chính
- Nhóm Miles đã triển khai hai giải pháp học tăng cường độ chính xác thấp gốc trên kiến trúc…
- Trong thí nghiệm loại bỏ thành phần trên Qwen3-30B-A3B với 8x B200,đường cong phần thưởng gốc của…
- và MXFP8 cùng NVFP4 giảm thời gian suy luận.
Tóm tắt nhanh
- Đăng lúc
- Cập nhật lúc
- Nguồn
- LMSYS Blog
- Danh mục
- Bài báo & nghiên cứu
- Điểm AI
- 69
虽然只针对Blackwell,但这份报告把MXFP8和NVFP4在RL里的实现细节讲清楚了,从量化合约到每token缩放都给了可复现配置,做大规模RL训练的能直接上手。
Nguồn và bản quyền
Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.
Cách trích dẫn
Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.
Orange News: Miles triển khai giải pháp học tăng cường MXFP8 đầu-cuối và NVFP4 theo từng token trên kiến trúc Blackwell. 29 tháng 7 2026. https://new.nat6.net/vi/news/cms6drkj8001crohzuxf7kfy7/