環球新資訊:單機1EP能力!英偉達推出GH200超級計算機
COMPUTEX-NVIDIA公司今天宣布推出一款新型大內存AI超級計算機--NVIDIA DGX?超級計算機,該計算機由NVIDIA? GH200 Grace Hopper超級芯片和NVIDIA NVLink?交換機系統提供動力,旨在為生成型AI語言應用、推薦系統和數據分析工作負載開發巨型的下一代模型。
【資料圖】
華碩(ASUS)DUAL GeForce RTX4070-12G顯卡 DUAL-RTX4070-12G
進入購買
NVIDIA DGX GH200的巨大共享內存空間利用NVLink互連技術與NVLink交換系統,將256個GH200超級芯片結合在一起,使它們能夠作為單個GPU來執行。這提供了1exaflops的性能和144T的共享內存,比2020年推出的上一代NVIDIA DGX A100的內存多出近500倍。
"生成性人工智能、大型語言模型和推薦系統是現代經濟的數字引擎,"英偉達創始人兼首席執行官黃仁勛說。"DGX GH200 AI超級計算機整合了英偉達最先進的加速計算和網絡技術,以拓展AI的前沿領域。"
英偉達NVLink技術擴大了AI的規模
GH200超級芯片使用NVIDIA NVLink-C2C芯片互連,將基于Arm的NVIDIA Grace? CPU與NVIDIA H100 Tensor Core GPU結合在同一封裝中,從而消除了對傳統CPU至GPU的連接的需求。與最新的PCIe技術相比,這將GPU和CPU之間的帶寬提高了7倍,將互連功耗削減了5倍以上,并為DGX GH200超級計算機提供了一個600GB的Hopper架構GPU構建塊。
DGX GH200是第一臺將Grace Hopper超級芯片與NVIDIA NVLink交換系統配對使用的超級計算機,NVLink交換系統是一種新的互連方式,能夠使DGX GH200系統中的所有GPU作為一個整體協同工作。上一代系統只提供八個GPU與NVLink結合為一個GPU,而不影響性能。
DGX GH200架構提供的NVLink帶寬是上一代的48倍,以單顆GPU的簡單編程提供了大規模AI超級計算機的能力。
為人工智能先驅者提供的新研究工具
谷歌云、Meta和微軟是首批有望獲得DGX GH200的用戶,以探索其在生成型AI工作負載方面的能力。英偉達還打算將DGX GH200的設計作為藍本提供給云服務提供商和其他超大規模企業,以便他們能夠為自己的基礎設施進一步定制。
"谷歌云計算副總裁Mark Lohmeyer表示:"構建先進的生成模型需要創新的AI基礎設施方法。"新的NVLink規模和Grace Hopper超級芯片的共享內存解決了大規模人工智能的關鍵瓶頸問題,我們期待著為谷歌云和我們的生成性人工智能計劃探索其能力。"
"隨著人工智能模型越來越大,它們需要強大的基礎設施,可以擴展以滿足日益增長的需求,"Meta公司基礎設施、人工智能系統和加速平臺副總裁Alexis Bj?rlin說。"NVIDIA的Grace Hopper設計看起來為研究人員提供了探索新方法的能力,以解決他們最大的挑戰。"
"訓練大型人工智能模型在傳統上是一項資源和時間密集型任務,"微軟Azure基礎設施公司副總裁Girish Bablani說。"DGX GH200處理TB級數據集的潛力將使開發人員能夠以更大的規模和加速的速度進行先進的研究。"
新的NVIDIA Helios超級計算機將推動研究和開發
英偉達正在建造自己的基于DGX GH200的人工智能超級計算機,為其研究人員和開發團隊的工作提供動力。
這臺超級計算機被命名為NVIDIA Helios,它將擁有四個DGX GH200系統。每個系統都將與英偉達Quantum-2 InfiniBand網絡互連,為訓練大型人工智能模型提高數據吞吐量。Helios將包括1,024個Grace Hopper超級芯片,預計將于今年年底上線。
完全集成,專為巨型模型而生
DGX GH200超級計算機包括英偉達軟件,為最大的人工智能和數據分析工作負載提供了一個交鑰匙的全棧解決方案。NVIDIA Base Command?軟件提供了AI工作流程管理、企業級集群管理、加速計算、存儲和網絡基礎設施的庫,以及為運行AI工作負載而優化的系統軟件。
此外,還包括NVIDIA AI Enterprise,這是NVIDIA AI平臺的軟件層。它提供了100多個框架、預訓練模型和開發工具,以簡化生產型AI的開發和部署,包括生成型AI、計算機視覺、語音AI等。
供應情況
NVIDIA DGX GH200超級計算機預計將于今年年底上市。
關鍵詞:
2023-05-30 06:48:03
2023-05-30 06:46:58
2023-05-30 06:38:34
2023-05-30 06:33:57
2023-05-30 06:19:32
2023-05-30 05:20:35
2023-05-30 04:39:06
2023-05-30 03:54:10
2023-05-30 02:28:24
2023-05-30 02:22:29
2023-05-30 01:53:41
2023-05-30 01:27:19
2023-05-29 23:04:22
2023-05-29 22:35:49
2023-05-29 21:50:52
2023-05-29 20:52:36
2023-05-29 20:02:46
2023-05-29 19:53:22
2023-05-29 19:53:15
2023-05-29 19:51:16
2023-05-29 19:49:33
2023-05-29 19:48:44
2023-05-29 19:45:45
2023-05-29 19:45:35
2023-05-29 19:44:16
2023-05-29 19:43:36
2023-05-29 19:42:41
2023-05-29 19:42:15
2023-05-29 19:40:36
2023-05-29 19:39:09
2023-05-29 19:37:08
2023-05-29 19:33:12
2023-05-29 19:05:37
2023-05-29 17:58:22
2023-05-29 17:55:05
2023-05-29 17:52:36
2023-05-29 17:49:56
2023-05-29 17:48:11
2023-05-29 17:42:41
2023-05-29 17:35:50
2023-05-29 17:35:25
2023-05-29 17:11:25
2023-05-29 16:56:00
2023-05-29 16:40:04
2023-05-29 16:39:33
2023-05-29 16:35:17
2023-05-29 16:33:35
2023-05-29 16:22:56
2023-05-29 16:22:01
2023-05-29 15:52:37
2023-05-29 15:44:56
2023-05-29 15:43:48
2023-05-29 15:37:07
2023-05-29 15:35:11
2023-05-29 15:22:48
2023-05-29 15:02:53
2023-05-29 14:49:16
2023-05-29 14:48:27
2023-05-29 14:37:11
2023-05-29 14:36:47
2023-05-29 14:30:55
2023-05-29 13:42:10
2023-05-29 13:40:17
2023-05-29 13:40:04
2023-05-29 12:57:05
2023-05-29 12:56:31
2023-05-29 12:51:36
2023-05-29 12:47:48
2023-05-29 12:44:35
2023-05-29 12:42:58
2023-05-29 12:24:02
2023-05-29 11:58:23
2023-05-29 11:49:25
2023-05-29 11:47:44
2023-05-29 11:47:39
2023-05-29 11:37:42
2023-05-29 11:34:31
2023-05-29 11:13:10
2023-05-29 10:56:51
2023-05-29 10:55:00
2023-05-29 10:52:11
2023-05-29 10:42:28
2023-05-29 10:11:10
2023-05-29 09:58:32
2023-05-29 09:47:44
2023-05-29 09:46:08
2023-05-29 09:42:07
2023-05-29 09:38:55
2023-05-29 09:38:07
2023-05-29 09:36:32
2023-05-29 09:35:35
2023-05-29 09:34:40
2023-05-29 09:17:15
2023-05-29 08:51:08
2023-05-29 08:35:40
2023-05-29 08:15:30
2023-05-29 07:45:56
2023-05-29 07:38:06
2023-05-29 07:04:25
相關新聞