中关村在线

热点资讯

英伟达GB300平台创混合专家模型训练新纪录:单卡算力达1648 TFLOPs

英伟达于2026年7月22日宣布,基于Blackwell架构的GB300计算平台在混合专家模型预训练领域创下新纪录。该平台使用256块GPU完成DeepSeek-v3 671B模型的训练,单卡吞吐量达到1648 TFLOPs。相较2025年11月公布的1088 TFLOPs,性能提升达百分之五十;与上一代GB200平台的606 TFLOPs相比,整体算力实现近三倍增长。

这一突破建立在大量系统性验证基础之上。过去六个多月里,研发团队对超过25万种硬件与软件配置组合进行了仿真与实测,从中提炼出38项关键优化策略,并累计完成逾140万小时的GPU实机测试。

混合专家模型是一种将大型语言模型划分为多个功能专精子网络的架构设计。在每次训练或推理过程中,仅动态激活其中部分子网络,从而在控制计算开销的同时显著扩展模型参数容量,已成为当前主流大模型的核心技术路径。

GB300 NVL72系统展现出更高的硬件利用效率,仅需更少数量的GPU即可达成同等训练效能。这将直接降低人工智能模型训练的单位算力成本,为大模型研发企业带来切实的资源优化空间。

英伟达指出,Blackwell架构的系统级优化仍在持续深入,现有成果已全面适配所有部署GB300的AI训练集群。对于DeepSeek等致力于大规模语言模型研发的企业而言,GB300所释放的单卡1648 TFLOPs算力,不仅大幅缩短模型训练周期,也支撑起更大规模模型的高频迭代与快速验证。

展开全文
人赞过该文
内容纠错

相关电商优惠

评论

更多评论
还没有人评论~ 快来抢沙发吧~

读过此文的还读过

点击加载更多

内容相关产品

说点什么吧~ 0

发评论,赚金豆

收藏 0 分享
首页查报价问答论坛下载手机笔记本游戏硬件数码影音家用电器办公打印 更多

更多频道

频道导航
辅助工具