英伟达发布全球最强AI芯片H200:性能较H100提升近一倍
中关村在线
2023-11-14 14:22:37

原标题:英伟达发布全球最强AI芯片H200:性能较H100提升近一倍

2023-11-14 12:46:24 作者:姚立伟

在2023年全球超算大会(SC2023)上,芯片巨头英伟达发布了其最强AI芯片H200的继任者。这款芯片基于英伟达的Hopper架构,性能直接提升了60%到90%,并且与H100可以互相兼容。

H200是英伟达首款使用HBM3e内存的芯片,具有更快的速度和更大的容量。它适合用于大语言模型的训练或推理,并且内存容量为141GB,带宽增加了50%。主要体现在大模型推理表现上,H200在700亿参数的Llama2大模型上的推理速度比H100快了一倍,并且在推理能耗方面降低了50%。

对于显存密集型HPC应用来说,H200更高的显存带宽能够确保高效地访问操作数据。与CPU相比,在获得结果的时间最多可提升110倍。

据称,英伟达预计将于2024年第二季度出货H200芯片。然而售价尚未公布,但考虑到当前算力短缺的情况下,大科技公司可能会疯狂购买这款产品。

相关内容

热门资讯

运营了17年的MMO,把新手村... 用不一样的方式讲故事。 文/青晖 《剑网3》里有个地方叫稻香村,是个新手村,每个玩家进入江湖的第一站...
原创 L... LOL选手比赛中发生重大失误,赛后连连道歉,发誓自己没有打假赛,这波操作,说实话,用“离谱”形容都不...
原创 梦... 梦幻西游2026春心萌动活动已于昨日12点开启全服投票,仅一天时间,男榜便呈现“神仙打架”的激烈态势...
《沙罗周期》评测9.2分:怒海... “硬核玩法设计教科书” 《沙罗周期》是Housemarque在《死亡回归》问世6载后,推出的又一款“...
原创 哪... 大家好我是指尖,哪吒的新皮肤已经全面曝光,不知道大家看过之后的感受如何,我只能说吸引力拉满了,想必很...