Ra mắt mô hình

DiffusionGemma: mô hình khuếch tán mã nguồn mở tăng tốc sinh văn bản 4 lần

Tiêu đề gốc:DiffusionGemma: 4x faster text generation

Tóm tắt AI

Google DeepMind phát hành mô hình thử nghiệm mã nguồn mở DiffusionGemma, dùng công nghệ khuếch tán văn bản, phá vỡ cách sinh từng token tự hồi quy, mỗi lần lan truyền trước sinh song song 256 token. Mô hình MoE 26B này khi suy luận chỉ kích hoạt 3,8B tham số, sau lượng tử hóa phù hợp GPU tiêu dùng 18GB bộ nhớ hiển thị. Đạt 1000+ tokens/s trên H100, 700+ tokens/s trên RTX 5090, tốc độ tăng 4 lần. Có chú ý hai chiều và khả năng tự sửa, hướng tới quy trình tương tác cục bộ như chỉnh sửa nội tuyến, điền mã, mở theo giấy phép Apache 2.0.

Thông tin chính

  • Google DeepMind phát hành mô hình thử nghiệm mã nguồn mở DiffusionGemma,dùng công nghệ khuếch tán…
  • Mô hình MoE 26B này khi suy luận chỉ kích hoạt 3,8B tham số,sau lượng tử hóa phù hợp GPU tiêu dùng…
  • Đạt 1000+ tokens/s trên H100,700+ tokens/s trên RTX 5090,tốc độ tăng 4 lần.
  • Có chú ý hai chiều và khả năng tự sửa,hướng tới quy trình tương tác cục bộ như chỉnh sửa nội…

Tóm tắt nhanh

Đăng lúc
Cập nhật lúc
Nguồn
Google DeepMind:Blog(RSS)
Danh mục
Ra mắt mô hình
Điểm AI
72
Đọc bản gốc Đọc toàn văn tại nguồn tin gốc
Lý do đề xuất

DiffusionGemma 虽为实验性质,但它把文本生成从“串行打字机”变成了“并行印刷机”,本地推理速度 4 倍提升,对需要实时交互的开发者是个值得关注的方向。

Thực thể liên quan

Nguồn và bản quyền

Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.

Liên kết gốc · Mục AIHOT

Cách trích dẫn

Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.

Orange News: DiffusionGemma: mô hình khuếch tán mã nguồn mở tăng tốc sinh văn bản 4 lần. 11 tháng 6 2026. https://new.nat6.net/vi/news/cmq8aoxud00ngslldd191n34b/

Xem tất cả →