Spectrum-X 專為生成式 AI 量身定制,為企業(yè)提供了一種全新的以太網絡,相較傳統(tǒng)以太網方案,其 AI 通信網絡性能提高了 1.6 倍。
這三家頭部系統(tǒng)制造商的新系統(tǒng),整合了 Spectrum-X 與 NVIDIA Tensor Core GPU、NVIDIA AI Enterprise 軟件和 NVIDIA AI Workbench 軟件,為企業(yè)通過生成式 AI 來實現業(yè)務轉型奠定了基礎。
NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛表示:“生成式 AI 和加速計算正在推動新一代的業(yè)務轉型,企業(yè)需要升級其數據中心來滿足新型業(yè)務的需求。加速網絡就是 NVIDIA 的頭部服務器制造商合作伙伴推出新一代系統(tǒng)的催化劑,加快他們邁向生成式AI新時代?!?/p>
戴爾科技集團董事長兼首席執(zhí)行官 Michael Dell 表示:“加速計算和加速網絡是構建支撐大語言模型和生成式 AI 應用系統(tǒng)的關鍵。戴爾科技和 NVIDIA 將攜手合作,為客戶提供基礎設施和軟件,使他們可以快速、安全地發(fā)掘出數據的潛力?!?/p>
慧與總裁兼首席執(zhí)行官 Antonio Neri 表示:“毫無疑問,生成式AI將推動各行各業(yè)的創(chuàng)新。這些強大的新型應用將需要一個全新的架構來支持各種不同的動態(tài)工作負載。為使客戶能夠充分挖掘生成式 AI 的潛力,慧與與 NVIDIA 攜手共建系統(tǒng)平臺,專們面向新型應用所需的性能、效率和可擴展性等需求?!?/p>
聯想集團董事會主席兼首席執(zhí)行官楊元慶表示:“生成式 AI 推動了前所未有的變革,但也對企業(yè)的基礎設施提出了更加苛刻的要求。通過與 NVIDIA 密切合作,聯想正在從網絡、計算和軟件等各個層面全方位構建高效的加速系統(tǒng),滿足現代 AI 應用的需求?!?/p>
專門用于加速 AI 的網絡
為實現 AI 業(yè)務的最佳效率,Spectrum-X 集性能優(yōu)異的 Spectrum-4 以太網交換機、NVIDIA BlueField-3? ?SuperNIC(一款可以大幅提升超大規(guī)模 AI 業(yè)務性能的新型網絡加速器)以及多種加速軟件于一體。全球領先的基礎設施計算平臺 —— NVIDIA BlueField-3 DPU 就屬于 Spectrum-X 的一部分。
Spectrum-4 是全球首款專門面向 AI 的 51Tb/sec 以太網交換機,可在大規(guī)模、滿負荷的場景下提供超高的數據吞吐量,同時在 AI 云業(yè)務的多租戶場景下將網絡擁塞降到了最低,其智能的、基于微調的路由技術可以保障網絡基礎設施的最大利用率。
BlueField-3 SuperNIC 專為網絡密集型的大規(guī)模并行計算而設計,可在 GPU 服務器之間提供高達 400Gb/s 的 RDMA(RoCE – RDMA over Converged Ethernet)網絡連接,大幅提升了集群內部基于東西網絡流量的 AI 訓練和推理性能,還能實現多租戶數據中心環(huán)境的安全隔離,確保租戶業(yè)務的可預測性和性能隔離。BlueField-3 SuperNIC 基于低功耗、半高半長的 PCIe 規(guī)格設計,是企業(yè)級服務器的理想選擇。對于追求高性能和安全的企業(yè)來說,BlueField-3 SuperNIC提供了一個強大而可靠的解決方案。
NVIDIA 加速軟件包括 Cumulus Linux、SONiC 和 NetQ 三者組成的性能優(yōu)異的 Spectrum-X 軟件開發(fā)套件,以及作為 BlueField 核心的 NVIDIA DOCA? 軟件框架。
NVIDIA AI Enterprise 為安全、穩(wěn)定和已經支持的生產級 AI 業(yè)務提供了框架、預訓練模型和開發(fā)工具。NVIDIA AI Workbench 使開發(fā)者能夠在 PC 或工作站上快速創(chuàng)建、測試和自定義預訓練生成式 AI 模型,然后將其擴展至幾乎任何數據中心或云。
搭載 Spectrum-X 的 NVIDIA 超級計算機
NVIDIA 自己的一臺超級計算機就在使用 Spectrum-X,這也是新一代 AI 系統(tǒng)的參考架構。該超級計算機由 NVIDIA 與戴爾科技聯合開發(fā),使用了基于 8 卡 NVIDIA Hopper GPU 的 HGX? 平臺和 BlueField-3 DPU 及 SuperNIC 的 Dell PowerEdge XE9680 服務器,并通過 Spectrum-4 交換機組成了集群系統(tǒng)。
供應情況
基于全套 NVIDIA AI 解決方案的戴爾服務器、慧與服務器和聯想服務器預計將于明年一季度推出。