从万亿开源到国产算力协同:Kimi K3 与摩尔线程智算卡…

AI广播站12小时前更新 小悠
7 0 0

7月28日晚,月之暗面正式开源2.8万亿参数模型Kimi K3并发布模型权重与技术报告;同日,摩尔线程官微宣布基于其AI训推一体智算卡MTT S5000及MUSA软件栈,率先完成Kimi K3的极速适配与稳定拉起。

作为全球首个开源的3万亿级别大模型及Kimi目前能力最强的版本,Kimi K3拥有2.8万亿参数与100万token上下文窗口,原生支持视觉理解,并融合KDA混合线性注意力机制(Kimi Delta Attention)、注意力残差(Attention Residuals)、Gated MLA以及Stable LatentMoE等多项架构创新,专为长程编程、知识工作与复杂推理等前沿智能场景打造。

从万亿开源到国产算力协同:Kimi K3 与摩尔线程智算卡完成全栈适配

此次极速适配不仅展现了摩尔线程MUSA软件生态面向前沿超大规模模型的快速响应与全栈协同能力,亦再次验证了国产全功能GPU支撑万亿级大模型研发与工程落地的硬核实力。随着高性能国产算力与顶尖开源生态的深维协同,大模型产业正加速迈向高效、自主可控的软硬件全栈创新阶段。

摩尔线程宣布已为月之暗面开源的2.8万亿参数Kimi K3模型完成适配,基于自研MTT S5000训推一体卡与MUSA软件栈,实现极速稳定运行,为国产算力支撑万亿大模型再添底气。

海光DCU完成万亿参数大模型Kimi K3全栈适配与验证,标志着国产算力首次稳稳支撑此类超大模型。通过底层算子到推理引擎的深度优化,模型无需任何代码改动,迁移成本近乎零,开发者拿到算力即可部署。同时针对KDA注意力与896专家MoE架构实现从容兼容,打破海外旗舰芯片垄断,提供开箱即用的国产方案。

Kimi K3权重昨夜在Hugging Face开源后,讽刺一幕立即上演:尽管美国政府与Anthropic等斥巨资游说封杀中国开源模型,至少18家美国企业仍第一时间完成部署并对外提供商业服务。网友Ding汇总的名单,将华盛顿的政治叙事与硅谷的务实理性之间的裂痕暴露无遗,顶级性能与极致性价比让商业理性压倒政治表态。

月之暗面将Kimi K3完整模型权重上传至Hugging Face,技术报告同步公开。该模型总参数2.8万亿、激活1040亿,支持100万token上下文,成为全球首个3万亿参数级开放权重模型。自7月16日API首发后仅11天,K3在Artificial Analysis智能指数中以57分位列全球第三,仅次于Claude Fable5和GPT-5.6 Sol。

7月28日,月之暗面发布Kimi K3模型权重及技术报告,同步开源MoonEP、FlashKDA和AgentEnv三项关键基础设施技术。Kimi K3为目前最强模型,采用MoE架构,总参数达2.8万亿。这三项技术为大规模训练的效率、稳定性及智能体任务执行,提供了核心底层支撑。

从万亿开源到国产算力协同:Kimi K3 与摩尔线程智算卡…

关注 “悠AI” 更多干货技巧行业动态

© 版权声明

相关文章

没有相关内容!

暂无评论

您必须登录才能参与评论!
立即登录
none
暂无评论...