Kimi K3也为国产AI芯片优化:华为昇腾950DT性能超越NVIDIA B300
最新7月22日消息,最近国产大模型Kimi K3的发布在国内外引发了热议,2.8万亿参数的K3性能已经达到了世界顶级水平,前端编程甚至位列第一,要想跑通K3这个大模型,AI平台的性能也至关重要。
以K3的参数量来看,当前已上市的平台中当然是NVIDIA的Blackwell B200/B300是最强的,但K3显然也会对国产AI平台做优化,也有国外的网友对比了华为昇腾950DT与NVIDIA显卡B300运行K3的效率。
他这个计算不是实际机器跑出来的,毕竟昇腾950DT国内也才刚开始部署,海外还拿不到,是基于950DT的参数来计算的。

对比的除了有B300之外,还有华为上一代的昇腾910C平台,可以看出昇腾950DT在每瓦Token生成数量上是占优的。
考虑到昇腾950DT在制程工艺上是要比B300落后两代水平的,因此华为自研的AI平台靠整体系统依然能获得优势,非常不容易,但这也彰显了华为提出韬定律是多么正确的思路。

昇腾950系列有昇腾950PR和昇腾950DT两款产品组成,二者使用的处理器核心是一样的,但搭配的内存系统不同,针对的市场也是不同的。
根据华为的说法,昇腾950PR采用的是昇腾950核心+HiBL 1.0内存,主要面向推理Prefill阶段和推荐业务场景,相比高性能、高价格的HBM3e/4e,能够大大降低推理Prefill阶段和推荐业务的投资。
昇腾950DT更注重推理Decode阶段和训练场景,由于推理Decode阶段和训练对互联带宽和访存带宽要求高,华为开发了HiZQ 2.0,使内存容量达到144GB,内存访问带宽达到4TB/s。同时把互联带宽提升到了2TB/s。
华为的Altas 950超节点集群最大可支持8192张基于昇腾950DT的昇腾计算卡高速互联,卡规模是Atlas 900超节点(384卡)的20多倍,是NVIDIA NVL144的56.8倍。
8192张卡的总FP8算力达到8EFLOPS,FP4算力达16EFLOPS,互联带宽高达16.3PB/s,总内存容量达1152TB,相比Atlas 900超节点,训练性能提升17倍,达到4.91M TPS。

《Kimi K3也为国产AI芯片优化:华为昇腾950DT性能超越NVIDIA B300》转载自互联网,如有侵权,联系我们删除,QQ:369-8522。
相关图文
-
总投资10亿元!佰维存储东莞晶圆级先进封测制造项目三期动工启动
快科技7月22日消息,据媒体报道,佰维存储子公司广东芯成汉奇半导体技术有限公司晶圆级先进封测制造项目三期在东莞松山湖全面动工。本期项目总投资10亿元,不同于行业常规产能扩建,具备鲜明的技... -
三星扩大英伟达NAND供应合作 加速V9、V10闪存布局
快科技7月22日消息,据媒体报道,继DRAM、高带宽内存(HBM)及晶圆代工合作之后,三星电子与英伟达的合作版图进一步延伸至NAND闪存领域,双方在存储供应链上的绑定进入全新阶段。据7月21日消息... -
长鑫DDR5扩产加速!海成DS开始供货封装基板:明年内存价格有望回落
快科技7月22日消息,当前DDR5内存价格仍处高位。16GB DDR5内存套装从2025年同期的约900元暴涨至3800元左右,涨幅超过400%。长鑫存储正在成为打破这一局面的关键变量。作为全球第四大DRAM厂商,... -
迎接大涨价吧!SK海力士CEO警告:2027将是存储史上最难的一年
快科技7月22日消息,据报道,SK海力士CEO郭鲁正近日发出警告,称2027年将是存储行业历史上供应最严峻的一年,当前由内存涨价引发的市场震荡可能还远未见顶。Business Times称,2027至2028年间... -
谁输谁出局!三星HBM4良率冲到70%:SK海力士和美光急砸钱追赶
快科技7月22日消息,第六代高带宽存储器HBM4已在AI加速芯片领域完成技术落地,三星、SK海力士与美光围绕HBM4的良率竞争已全面展开。良率直接决定交付量和利润,谁落后谁就有可能出局!三星率先...












