英伟达发布全球最强AI芯片H200:性能较H100提升近一倍
中关村在线
2023-11-14 14:22:37

原标题:英伟达发布全球最强AI芯片H200:性能较H100提升近一倍

2023-11-14 12:46:24 作者:姚立伟

在2023年全球超算大会(SC2023)上,芯片巨头英伟达发布了其最强AI芯片H200的继任者。这款芯片基于英伟达的Hopper架构,性能直接提升了60%到90%,并且与H100可以互相兼容。

H200是英伟达首款使用HBM3e内存的芯片,具有更快的速度和更大的容量。它适合用于大语言模型的训练或推理,并且内存容量为141GB,带宽增加了50%。主要体现在大模型推理表现上,H200在700亿参数的Llama2大模型上的推理速度比H100快了一倍,并且在推理能耗方面降低了50%。

对于显存密集型HPC应用来说,H200更高的显存带宽能够确保高效地访问操作数据。与CPU相比,在获得结果的时间最多可提升110倍。

据称,英伟达预计将于2024年第二季度出货H200芯片。然而售价尚未公布,但考虑到当前算力短缺的情况下,大科技公司可能会疯狂购买这款产品。

相关内容

热门资讯

方斌:让机器人指尖如人手,可感... 【“科协十一大”精神学习进行时】 近日,国家科学技术奖励大会、两院院士大会、中国科协第十一次全国代表...
财经深一度|当AI帮人决策“买... 新华社北京8月28日电题:当AI帮人决策“买单”,如何筑牢支付安全底线 新华社记者吴雨 “帮我订张机...
台风“沙德尔”过后农业复产指南... 今年第18号台风“沙德尔”(台风级)的中心已于今天(28日)8时05分前后在浙江台州玉环市坎门街道沿...
IG零封TT晋级,女明星都来给... LPL骑士之路精彩赛事依旧在火热进行中,今天的两场骑士之路对决都结束了,像是约好了一样,结果都是相同...
欧洲给AI数据中心配电源,中国... AI数据中心的电力焦虑,正在欧洲催生一种过去并不存在的产业政策。 8月25日,西班牙政府公布了一份新...