英伟达发布全球最强AI芯片H200:性能较H100提升近一倍
中关村在线
2023-11-14 14:22:37

原标题:英伟达发布全球最强AI芯片H200:性能较H100提升近一倍

2023-11-14 12:46:24 作者:姚立伟

在2023年全球超算大会(SC2023)上,芯片巨头英伟达发布了其最强AI芯片H200的继任者。这款芯片基于英伟达的Hopper架构,性能直接提升了60%到90%,并且与H100可以互相兼容。

H200是英伟达首款使用HBM3e内存的芯片,具有更快的速度和更大的容量。它适合用于大语言模型的训练或推理,并且内存容量为141GB,带宽增加了50%。主要体现在大模型推理表现上,H200在700亿参数的Llama2大模型上的推理速度比H100快了一倍,并且在推理能耗方面降低了50%。

对于显存密集型HPC应用来说,H200更高的显存带宽能够确保高效地访问操作数据。与CPU相比,在获得结果的时间最多可提升110倍。

据称,英伟达预计将于2024年第二季度出货H200芯片。然而售价尚未公布,但考虑到当前算力短缺的情况下,大科技公司可能会疯狂购买这款产品。

相关内容

热门资讯

AI应用周度观察(2026年6... (来源:界面新闻) 赛道一:通用消费级AI应用(C端流量+生态) 1、百度:文心一言App上线“深度...
“追星”成功!天问二号抵达目标... 7 月 6 日消息,据新华社今日从国家航天局获悉,我国深空探测任务取得重大进展,天问二号探测器历经约...
全系突破550万台:小米17系... IT之家 7 月 6 日消息,据长期关注国内手机市场份额的数码博主 @RD观测 昨晚爆料,截至 20...
南方观察|从实验室到生产线,东... 7月1日,第三届粤港澳大湾区博士博士后创新创业大赛宣讲推介会走进位于成都的电子科技大学。 这是一所与...
用车无忧 服务无界——途虎养车... 2026年7月1日,途虎养车与新石器无人车在北京举行战略合作发布会。双方宣布,将依托途虎养车覆盖全国...