发布过程
中国公司**月之暗面(Moonshot AI)**于 2026年7月16日在 API 和应用中上线 Kimi K3,并承诺月底前开放权重。7月27日的"Kimi K3 Open Day"上,公司在 GitHub(MoonshotAI/Kimi-K3)发布了权重、技术报告和三项基础设施技术。
关键数据
- 采用 Mixture-of-Experts 架构,2.8 万亿参数,每个 token 激活 896 个专家中的 16 个。
- 100 万 token 上下文窗口,原生支持文本、图像和视频输入。
- 新技术 Kimi Delta Attention(KDA)与 Attention Residuals,公司称相较 Kimi K2 带来约 2.5 倍扩展效率。
- 从 SFT 阶段起进行 MXFP4 量化感知训练。
- 同步开源:MoonEP(MoE 通信)、FlashKDA(内核)和 AgentEnv(智能体沙箱)。
在月之暗面自己公布的基准中,K3 接近顶级闭源模型,并在 BrowseComp、MCPMark 等部分智能体测试中领先。这些数字来自公司本身,仍需独立验证。
注意事项
权重采用 Kimi K3 License,而非 MIT 或 Apache 等标准许可。超出许可范围的商业使用需仔细阅读条款。此外,部署如此规模的模型需要高端 GPU 集群,"开放"不等于"便宜"。
为什么重要
据月之暗面称,这是首个 3 万亿参数级的开放模型,进一步强化了中国实验室在高竞争力开放权重上的布局。