NVIDIA (輝達) 今天宣布與微軟展開多年的合作計畫,
Azure 的雲端 AI 超級電腦包括功能強大且具擴充性的 ND 系列及 NC 系列虛擬機器,這些虛擬機器經過最佳化調整,適用於執行 AI 分散式訓練和推論作業。Azure 是第一個整合 NVIDIA 先進 AI 堆疊的公有雲,在其平台上加入上萬個 NVIDIA A100 和 H100 GPU、NVIDIA Quantum-2 400Gb/s InfiniBand 網路技術與 NVIDIA AI Enterprise 軟體套件。
NVIDIA 將在本次的合作中運用 Azure 具擴充性的虛擬機器執行個體,推動研究並進一步加快推動生成式 AI (generative AI) 的進展。生成式 AI 是迅速崛起的 AI 領域,其中像是 Megatron Turing NLG 530B 這樣的基礎模型,是無監督、自我學習演算法的基礎,
雙方亦合作將微軟的 DeepSpeed 深度學習最佳化軟體調整到最佳狀態。NVIDIA 專為 Azure 進行最佳化調整的全堆疊AI 工作流程和軟體開發套件,將提供 Azure 的企業客戶使用。
微軟的 DeepSpeed 將利用 NVIDIA H100 Transformer 引擎加快執行採用 Transformer 模型的速度,用於大型語言模型、生成式 AI 和電腦程式碼編寫等廣泛應用。這項技術將 8 位元浮點精度功能用於 DeepSpeed,以大幅加快採用 Transformer 模型的 AI 運算速度,其傳輸量是 16 位元運算的兩倍。
Microsoft Azure 上針對 AI 進行最佳化調整的虛擬機器執行個體建構於 NVIDIA 最先進的資料中心 GPU,是第一個採用 NVIDIA Quantum-2 400Gb/s InfiniBand 網路技術的公有雲執行個體。客戶可以在單一叢集中部署數千個 GPU,訓練最龐大的大型語言模型、
NVIDIA 企業運算部門副總裁 Manuvir Das 表示:「AI 技術的進步加上產業採用的腳步不斷加快。
請注意!留言要自負法律責任,相關案例層出不窮,請慎重發文!