TII phát hành dòng mô hình ngôn ngữ BitNet 1.58bit Falcon-Edge, gồm hai quy mô 1B và 3B
Tiêu đề gốc:Falcon-Edge: A series of powerful, universal, fine-tunable 1.58bit language models.
Tóm tắt AI
Dòng Falcon-Edge của TII dựa trên kiến trúc BitNet, huấn luyện trước trực tiếp với trọng số ba giá trị {-1, 0, 1}, cung cấp hai quy mô tham số 1B và 3B, mỗi loại gồm phiên bản base và instruct, mô hình được huấn luyện trước trên hỗn hợp dữ liệu nội bộ khoảng 1.5 Tera Tokens.
Thông tin chính
- Dòng Falcon-Edge của TII dựa trên kiến trúc BitNet,huấn luyện trước trực tiếp với trọng số ba giá…
- mỗi loại gồm phiên bản base và instruct,mô hình được huấn luyện trước trên hỗn hợp dữ liệu nội bộ…
- 5 Tera Tokens.
Tóm tắt nhanh
- Đăng lúc
- Cập nhật lúc
- Nguồn
- Hugging Face 社区博客(混合发现)
- Danh mục
- Ra mắt mô hình
- Điểm AI
- 64
原文解释了 BitNet 三值权重的训练范式和微调路径,读者可以据此判断 1.58bit 模型在端侧部署的适用性。
Nguồn và bản quyền
Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.
Cách trích dẫn
Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.
Orange News: TII phát hành dòng mô hình ngôn ngữ BitNet 1.58bit Falcon-Edge, gồm hai quy mô 1B và 3B. 15 tháng 5 2025. https://new.nat6.net/vi/news/fm425yt03kg5jtbfgp99um7jm/