中关村在线

热点资讯

月之暗面发布2.8万亿参数Kimi K3大模型,马斯克点赞并称将推出竞品

2026年7月20日,中国人工智能企业月之暗面正式推出新一代大模型Kimi K3。该模型参数规模达2.8万亿,是当前全球范围内参数量最大的开源语言模型。

Kimi K3具备原生多模态能力,支持图像输入,并可处理长达100万Token的上下文。技术层面,模型采用自研的Kimi Delta Attention机制、注意力残差结构,以及高度稀疏的混合专家架构。在实际推理过程中,每个Token仅需激活896个专家中的16个,显著提升了计算资源的利用效率。

据月之暗面介绍,依托全新架构设计与优化后的训练策略,Kimi K3的整体扩展效率相较前代Kimi K2提升约2.5倍。在内部多项端到端知识任务评估中,其综合表现优于GPT-5.5与Claude Opus 4.8。

值得关注的是,Kimi K3发布后不久,马斯克在其相关技术评测内容下留言称“令人印象深刻”,这是他继今年3月公开肯定Kimi底层架构技术报告之后,第二次对该团队的技术成果表示认可。

然而,热度尚未消退,7月18日,马斯克再度发表评论,透露其团队研发的2万亿参数模型将于下周完成初始训练。他表示,该模型全面优于此前1.5万亿参数版本,并推测其性能“可能超越Kimi”。

对此,Kimi官方回应表示:欢迎马斯克加入“2万亿+俱乐部”。

展开全文
人赞过该文
内容纠错

相关电商优惠

评论

更多评论
还没有人评论~ 快来抢沙发吧~

读过此文的还读过

点击加载更多

内容相关产品

说点什么吧~ 0

发评论,赚金豆

收藏 0 分享
首页查报价问答论坛下载手机笔记本游戏硬件数码影音家用电器办公打印 更多

更多频道

频道导航
辅助工具