NVIDIA Blackwell GPU首次实测跑分:提升多达2.2倍

11月14日消息,NVIDIA Blackwell GPU相当强悍,大家都知道,但到底有多强呢?

除了官方宣传数据,现在终于第一次看到了实测数据,来自MLCommons MLPerf v4.1,考察AI训练推理性能的最佳平台。

对比对象是两代服务器HGX B200、HGX H200,前者包含多达八颗Blackwell GPU B200,单颗功耗高达1000W。

GPT-3预训练项目中,Blackwell的性能相比上代Hopper翻了一番。

Llama 2 700亿参数微调项目中,Blackwell的性能更是提升了多达2.2倍。

值得一提的是,Blackwell平台具备ConnectX-7 SuperNICs网卡、Quantum-2 InfiniBand交换机,再加上第五代NVLink互连总线,可以充分保障节点间的通信,可以平衡分配AI训练负载,整体效率更高。

比如同样的GPT-3 1750亿参数性能,Hopper需要多达256颗GPU,Blackwell就只需要64颗。

以上就是关于【NVIDIA Blackwell GPU首次实测跑分:提升多达2.2倍】的相关消息了,希望对大家有所帮助!

原创文章,作者:yajje,如若转载,请注明出处:https://www.yajje.com/baike/15194.html

Like (0)
yajje的头像yajje
Previous 2024年11月14日
Next 2024年11月14日

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

PS:如果有关于百度百科编辑的任何问题,欢迎留言咨询,百科优化网yajje无偿免费回答。