Reflection AI 将其首个大语言模型 Beam 的权重开源至 Hugging Face,并同步发布后训练配方等技术资源,供开发者定制模型。Beam 拥有约 5000 亿参数,在部分基准测试中性能接近其四倍规模模型,同时算力与内存消耗显著更低。该模型历时两个月、动用数千块高端显卡训练完成。为应对大规模训练中的错误,团队开发了定制可靠性优化算法,重点解决训练与推理配置不一致的问题,并构建了可自动修复数据质量错误、从早期阶段回滚续训的系统,从而实现近乎零集群停机。此次发布包含标准版及多个量化版本权重、微调代码模板、能力与安全评估工具,以及用于推测解码的草稿模型和适配主流服务引擎的即用配置。
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅