Hugging Face 发布全开源 3B 模型 SmolLM3,支持 128k 长上下文与双模式推理
原文标题:SmolLM3: smol, multilingual, long-context reasoner
AI 摘要
Hugging Face 发布全开源 3B 模型 SmolLM3,基于 11T token 预训练,官方称在 3B 规模上超越 Llama-3.2-3B 和 Qwen2.5-3B,并与 Qwen3、Gemma3 等 4B 模型竞争。
关键信息
- Hugging Face 发布全开源 3B 模型 SmolLM3,基于 11T token 预训练,官方称在 3B 规模上超越 Llama-3.
- 2-3B 和 Qwen2.
- 5-3B,并与 Qwen3、Gemma3 等 4B 模型竞争
- 官方完整公开 3B 模型的架构改动、三阶段数据配比和双模式训练配方,想复现或改进小模型的人可据此省去数月逆向工程
速览
- 发布时间
- 更新时间
- 分类
- 模型发布
- AI 评分
- 76
推荐理由
官方完整公开 3B 模型的架构改动、三阶段数据配比和双模式训练配方,想复现或改进小模型的人可据此省去数月逆向工程。
相关实体
来源与版权
本文基于 AIHOT 公开 API 的精选标题与 AI 摘要整理,已注明来源并回链;原文版权归原媒体与作者所有,本站不镜像全文。
如何引用
引用本文时请保留标题、日期与永久链接,并注明来源为橙子新闻。
橙子新闻:Hugging Face 发布全开源 3B 模型 SmolLM3,支持 128k 长上下文与双模式推理。2025年7月8日。https://new.nat6.net/news/x23efo4mfgbbgww4lwc4c5s95/