月之暗面 Kimi 开源 Moonlight

快讯零壹财经零壹财经 2025-02-24 阅读：2408

关键词：月之暗面 Kimi 人工智能

2 月 24 日讯，月之暗面 Kimi 昨日发布了“Muon 可扩展用于 LLM 训练”的新技术报告，并宣布推出“Moonlight”：一个在 Muon 上训练的 30 亿 / 160 亿参数混合专家模型（MoE）。使用了 5.7 万亿个，在更低的浮点运算次数（FLOPs）下实现了更好的性能，从而提升了帕累托效率边界。（IT之家）

上一篇>模速空间、无问芯穹和上海仪电联手打造国内首个“算力生态超市”

下一篇>全国首笔中新跨境数字人民币贸易结算业务落地