月之暗面开源 Kimi K3 模型,2.8 万亿参数

2.8万亿参数登顶,国产开源模型迎来新里程碑

7月16日,月之暗面在上海世界人工智能大会期间正式推出Kimi K3,参数规模高达2.8万亿,一举超越此前所有开源模型,成为全球首个超2万亿参数级别的开源大模型。这一数字意味着模型“神经连接”数量接近3万亿,能承载更多知识与规律,做到“懂更多、想更深、答更准”。从2026年初DeepSeek的670B,到智谱GLM-5.2,再到如今Kimi K3,短短半年内开源模型参数规模增长超过4倍,国产大模型集体突破的态势愈发明显。

月之暗面开源 Kimi K3 模型,2.8 万亿参数

自研KDA架构与百万上下文,解码加速6.3倍

Kimi K3在底层架构上采用自主研制的混合线性注意力机制“Kimi Delta Attention”(KDA)及注意力残差结构(AttnRes)。官方数据显示,KDA技术能在百万级上下文下实现最高6.3倍的解码加速,而AttnRes机制以不到2%的额外成本提升约25%的模型训练效率。模型采用高稀疏度混合专家设计,拥有896个专家模块,但每次推理仅激活其中16个,在扩大容量的同时有效控制计算成本。此外,Kimi K3原生支持视觉理解,拥有100万Token的上下文窗口——相当于一次性处理500部完整小说或数万页技术文档,并从头到尾精准提炼要点。

性能逼近Claude Fable 5与GPT-5.6,实测超越Opus 4.8

在多维度基准测试中,Kimi K3展现出前沿级实力。在评估跨行业真实工作能力的GDPval-AA v2测试中,Kimi K3获得1687分,超越Anthropic的Claude Opus 4.8 Max的1600分,仅落后于Claude Fable 5 Max和GPT-5.6 Sol Max。在AA-Briefcase智能体知识工作测试中,Kimi K3以1527分同样位居第三,但超越了GPT-5.6 Sol Max。国内外对冲基金经理实测后指出,Kimi K3性能已超越Opus 4.8,且API定价仅为后者六成左右,实际体验接近顶级闭源模型,具备“Fable级体感”。月之暗面表示,Kimi K3整体仍略逊于Claude Fable 5和GPT-5.6 Sol,但差距正在迅速缩小。

开源策略与生态落地:从“拼参数”转向“拼应用”

Kimi K3完整权重计划于2026年7月27日前发布,技术报告同步公开,开发者可免费下载权重、本地部署与二次微调。这一开源策略有望激活整个开发者生态:个人开发者也能在消费级显卡上微调蒸馏版本,做垂直场景的小模型,降低行业创新门槛。月之暗面同步推进K2.7 Code、Kimi Work等垂直方向,把Agent能力搬到桌面端,支持本地文件操作、浏览器自动化与定时任务,大模型竞争正从“拼参数”转向“拼谁能把AI做成生意”。对普通用户而言,这意味着未来可能无需联网,就能在本地运行几万字的论文摘要、几百页的合同审查,甚至分析整年股票财报——一个“私人智囊”正在加速到来。