找回密碼註冊
作者: sxs112.tw
查看: 10634
回復: 0

文章分享:

+ MORE精選文章:

+ MORE活動推薦:

GEX PRO 850W玩家開箱體驗分享活動

卓越性能,超值選擇 GEX PRO 系列通過 80 PLUS 金牌認證,實現高達 ...

體驗極速WiFi 7!MSI Roamii BE Lite Mesh

第一名 guanrung1110 https://www.xfastest.com/thread-293988-1- ...

極致效能 為遊戲而生 990 PRO SSD 玩家體驗

[*]極致效能固態硬碟 [*]PCIe 4.0 速度大幅提升 [*]優化的電源效率 ...

Micron Crucial PRO D5 6400超頻版 玩家開

解銷更快的遊戲速度! 利用低延遲遊戲記憶體的強大功能 利用 Cruci ...

打印 上一主題 下一主題

[顯示卡器] 配備94GB HBM3的NVIDIA H100 NVL GPU是專為ChatGPT設計

[複製鏈接]| 回復
跳轉到指定樓層
1#
sxs112.tw 發表於 2023-3-22 07:24:25 | 只看該作者 |只看大圖 回帖獎勵 |倒序瀏覽 |閱讀模式
NVIDIA剛剛推出了其全新的Hopper H100 NVL GPU,配備94GB HBM3,專為ChatGPT設計。

NVIDIA Hopper GPU驅動的H100 NVL PCIe顯示卡據說有雙GPU NVLINK互連,每個晶片有94GB的HBM3e。GPU能夠隨時隨地處理多達1750億個ChatGPT參數。與配備多達8個GPU的傳統DGX A100伺服器相比,單個伺服器中的四個GPU可以提供高達10倍的速度。
NVIDIA-Hopper-H100-NVL-GPU-94-GB-HBM3e-ChatGPT-_1.png

與H100 SXM5配置不同,H100 PCIe提供精簡規格,在GH100 GPU的全部144個SM和H100 SXM上的132個SM中啟用了114個SM。該晶片本身提供3200 FP8、1600 TF16和48 TFLOPs的FP64計算能力。它還有456個Tensor & Texture單元。
NVIDIA-Hopper-H100-NVL-GPU-94-GB-HBM3e-ChatGPT-_2.png

由於其較低的峰值計算能力,H100 PCIe應該會以較低的時脈執行,因此TDP為350W,而SXM5版本的TDP為雙倍的700W。但是PCIe卡將保留其80GB記憶體,透過5120位元匯流排,但採用HBM2e版本(>2TB/s頻寬)。

H100的非Tensor  FP32 TFLOP額定值為48 TFLOP,而MI210的峰值額定FP32計算能力為45.3 TFLOP。透過Sparsity與Tensor運算,H100可以輸出高達800 TFLOPs的FP32運算能力。與MI210的64GB相比,H100還擁有更高的80GB記憶體容量。從表面上看NVIDIA正在為其更高的AI/ML功能收取更高的售價。

消息來源
您需要登錄後才可以回帖 登錄 | 註冊 |

本版積分規則

小黑屋|手機版|無圖浏覽|網站地圖|XFastest  

GMT+8, 2024-11-24 09:00 , Processed in 0.081982 second(s), 34 queries .

專業網站主機規劃 威利 100HUB.COM

© 2001-2018

快速回復 返回頂部 返回列表