業(yè)內消息,近日英偉達在超級計算大會上發(fā)布了全新一代號稱全球最強的人工智能(AI)芯片 H200 及相應的產品線。該芯片將被用于數據中心和超級計算機,處理諸如天氣和氣候預測、藥物發(fā)現、量子計算等任務。
此次發(fā)布的關鍵產品是基于英偉達的 “Hopper” 架構的 HGX H200 GPU,是 H100 GPU 的繼任者,也是該公司第一款使用 HBM3e 內存的芯片,這種內存速度更快、容量更大,因此更適合大型語言模型。
該芯片相較于上一代有了質的飛躍,比 H100/H200 的性能直接提升了 60%-90%。英偉達表示,H200 憑借 HBM3e 以每秒 4.8 TB 的速度提供 141GB 的內存,容量幾乎是 A100 的兩倍,帶寬則增加了 2.4 倍。
英偉達表示,HGX H200 在 Llama 2(700 億參數 LLM)上的推理速度比 H100 快了一倍。HGX H200 將以 4 路和 8 路的配置提供,與 H100 系統中的軟件和硬件兼容。此外,還適用于各種數據中心(本地、云、混合云和邊緣),將于明年二季度推出。
英偉達此次發(fā)布的另一個關鍵產品是 GH200 Grace Hopper “超級芯片(superchip)”,其將 HGX H200 GPU 和基于 Arm 的英偉達 Grace CPU 通過該公司的 NVLink-C2C 互連結合起來,官方稱其專為超級計算機設計。
GH200 將被用于“全球研究中心、系統制造商和云提供商的 40 多臺 AI 超級計算機”,其中包括戴爾、Eviden、惠普企業(yè)(HPE)、聯想、QCT 和 Supermicro。其中值得注意的是,HPE 的 Cray EX2500 超級計算機將使用四路 GH200,可擴展到數萬個 Grace Hopper 超級芯片節(jié)點。
值得一提的是,德國 Jülich 工廠的 JUPITER 明年將安裝世界上最強大的 AI 系統(Grace Hopper 超級計算機),因為其使用了液冷架構,其增強模塊由近 24000 個英偉達 GH200 超級芯片組成,這些芯片通過英偉達 Quantum-2 InfiniBand 網絡平臺互連。





