🔥 今日值得一读 Cohere开源2180亿参数翻译模型:每次只激活250亿,50种语言拿下83.6分!
Cohere Releases North Small Translate: A 218B MoE Translation Model That Scores 83.6 on WMT26 Across 50 Languages
MarkTechPost 🔥 重点 大模型开源多模态 🕐 09-11 14:57

📖 AI 总结

Cohere发布了开源权重翻译模型North Small Translate,采用稀疏混合专家架构,总参数量218B、每token激活25B,覆盖从阿尔巴尼亚语到越南语的50种语言。在Cohere自建的WMT26评测中,该模型所有语言平均得分83.6,官方称其表现优于DeepL、Google Translate以及GLM 5.2、Mistral Large 3等开源方案。模型采用解码器-only结构,含128个专家、每token激活8个,并引入共享专家;注意力层以3:1比例交错滑动窗口层与全局层,支持16K输入输出。该模型是Cohere North系列首款翻译模型,由Cohere与RWS合作打造,可通过API免费调用、非商业自托管或商业授权部署。此举被视为回归Transformer最初聚焦的翻译问题,并将翻译能力与组织全球沟通的自主权联系起来。

🔍 深度解读 换个视角,同一件事有不同答案

正在读取芙娘的解读…
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅