Meta將採購2000套DGX A100,打造全球最強AI超算

Meta將採購2000套DGX A100,打造全球最強AI超算

1月25日訊息,近日,Meta(Facebook母公司)宣佈建造全球最強大的AI超算,名為AI Research SuperCluster(RSC)。其目標是最終運算速度(Linpack)達到220 petaflops(每秒22億億次)。實際上,RSC已經投入執行,但後續還會追加運算節點。

目前,RSC的配置是760套Nvidia DGX A100 AI系統,也就是1520顆AMD 64核EPYC處理器(第二代,代號Rome)、6080顆NVIDIA A100 GPU。

Meta將採購2000套DGX A100,打造全球最強AI超算

DGX A100

I/O方面,網路頻寬200Gbps、175PB FlashArray、10PB FlashBlade以及46PB快取。

Meta將採購2000套DGX A100,打造全球最強AI超算

根據初期測試顯示,其在進行視覺運算時,工作速度較之前的AI 運算系統提升20 倍,執行NVIDIA NCCL 的速度則提升9 倍以上,且在訓練大規模的語言模型上則提升3倍。這也意味著SRC 可在三週內完成擁有數百億引數的模型,而之前的系統需花費九周的時間。

Meta將採購2000套DGX A100,打造全球最強AI超算

Meta指出,其研究團隊目前正在使用這臺超級計算機訓練AI 模型,進行自然語言處理和電腦視覺研究;目標是希望SRC 有朝一日能在1 艾位元組的資料集上訓練包含超過1萬億個引數的模型(1 艾位元組大約相當於3。6 萬年的高畫質影片)。

Meta也強調,儘管SRC 已開始執行,不過其仍在開發中,Meta 將努力提升SRC 中的GPU 數量,預計未來會再追加1240套DGX A100系統,單GPU規模就多達16000顆(單顆視訊記憶體40GB)。這將使AI 訓練效能提高2。5 倍以上。當今年夏天SRC 完全建置完成後,將成為世上最快的AI 超級電腦。

資料顯示,NVIDIA DGX A100釋出於2020年,單套系統售價高達19。9萬美元。也就是說,RSC最終完工時,單採購DGX A100就需要花費3。98億美元(約合人民幣25億)。

編輯:芯智訊-林子

炒股開戶享福利,入金抽188元紅包,100%中獎!

開啟App看更多精彩內容