跳到正文
原文
Hugging Face Blog·· 15 小时前精选AI 评分75

Reflection 发布开源 MoE 模型 Beam:501B 参数、1M 上下文、面向编码与智能体

Welcome Beam: a 501B open model you can own, customize, and scale

AI 导读

Hugging Face 博客宣布 Reflection 发布的 Beam 模型开源上线。该模型为 501B 参数的稀疏 MoE LLM,每 token 激活 23B 参数,共 52 层、每层 256 专家(每 token 路由 8 个),采用 Apache 2.0 许可,文本输入输出,上下文窗口 1M tokens,重点面向编码与智能体场景。

推荐理由

Beam 的 501B MoE 架构、1M 上下文与 Apache 2.0 许可在开源大模型里较为少见,为评估自部署与定制工作流提供了具体参照。

来源:Hugging Face Blog · huggingface.co