10月24日凌晨,月之暗面发布新一代开源模型Kimi K3.1 Pro。该模型参数规模达到3万亿级,支持100万词元上下文窗口,继续位居全球开源模型参数量首位。今年7月发布的Kimi K3参数规模为2.8万亿,K3.1 Pro是在其基础上完成的后训练版本,后训练环节的算力投入大幅增加。

据悉,在代码、智能体与知识类基准上,K3.1 Pro达到或接近最强闭源模型的水平,其中长程编码能力的改进来自大规模强化学习。
团队对K3.1 Pro的漏洞研究能力做了专项测评,并在训练中施加针对性控制。研发过程中发现,即使不刻意加入相关数据,模型的网络攻防能力也会随训练规模扩大而自然提升。查明来源后,团队从中期训练与强化学习两个阶段识别并移除了相关数据。团队同时明确两项开放原则:不发布推进网络攻防能力绝对前沿的开放权重,并逐步提升开放权重中可用的同类能力。
据Artificial Analysis榜单,Kimi K3.1 Pro在智能指数中排名第4,位居全球开源模型之首,价格约为GPT-6 Astra的五分之一。
过去一年,厂商差距主要落在参数规模与训练算力上,K3.1 Pro显示后训练阶段的强化学习投入同样能拉开代际差,算力竞争的重心正从预训练向前延伸到后训练环节。权重开放时点与网络攻防数据的处理方式同步披露,把"开放到什么程度"这一此前模糊的问题变成了可被外部检验的具体承诺。










