浪潮信息聯(lián)合英特爾發(fā)布新一代AI服務器NF5698G7,支持8顆Gaudi2加速器

7月11日,浪潮信息聯(lián)合英特爾發(fā)布面向生成式AI領域創(chuàng)新開發(fā)的新一代AI服務器NF5698G7。AI服務器支持8顆OAM高速互聯(lián)的Gaudi2加速器,具備高性能、高擴展、高能效和開放生態(tài)等優(yōu)點,將為AI客戶提供強大的大模型訓練和推理能力。

浪潮信息NF5698G7

浪潮信息NF5698G7在6U空間支持8顆基于開放加速模組OAM高速互聯(lián)的Gaudi2 AI加速器,每顆Gaudi2芯片配置96GB HBM高速內存,共提供2.1Tbps的P2P互聯(lián)帶寬,支持全互聯(lián)拓撲,滿足大模型訓練張量并行的通信需求;搭載2顆第四代至強處理器,支持AMX/DSA等AI加速引擎。Gaudi2是英特爾推出的深度學習加速器,以多方位性能與能效比提升,為業(yè)界提供了高性能、高性價比的AI算力選項,在MLPerf的GPT-3、ResNet-50、Unet3D、BERT等基準測試中,均取得了優(yōu)異的性能表現(xiàn)。

NF5698G7采用高擴展設計,支持12個PCIe5.0 X16的IO擴展,最大支持4800Gbps節(jié)點間互聯(lián)帶寬,滿足大模型流水線并行和數(shù)據(jù)并行的通信需求,可擴展至萬卡AI集群。NF5698G7通過精細化分區(qū)、智能散熱調控、12V & 54V N+N雙輸入供電等創(chuàng)新設計,實現(xiàn)高功率負載動態(tài)匹配和低電源功率損耗,系統(tǒng)功耗降低8%。

NF5698G7基于全球開放計算OCP開放加速器規(guī)范 OAM/UBB進行產(chǎn)品設計,支持PyTorch、TensorFlow等主流AI框架和Megatron/DeepSpeed等流行開發(fā)工具,為生成式AI提供成熟、高性價比的開放生態(tài)產(chǎn)品方案。NF5698G7支持浪潮信息的AI算力資源平臺AIStation,通過對計算資源、數(shù)據(jù)資源、深度學習軟件棧資源進行統(tǒng)一管理,有效提升大模型算力平臺的使用效率,助力客戶加速AI大模型開發(fā)與部署。

浪潮信息高級副總裁、AI&HPC產(chǎn)品線總經(jīng)理劉軍表示:“NF5698G7為生成式AI應用提供了極具吸引力的AI算力平臺,我們與英特爾緊密協(xié)作,優(yōu)化了NF5698G7在多種生成式AI場景的性能表現(xiàn),為AI客戶提供強大的大模型訓練和推理能力,加速AIGC創(chuàng)新步伐、賦力生成式AI產(chǎn)業(yè)創(chuàng)新。”

英特爾執(zhí)行副總裁兼數(shù)據(jù)中心與人工智能事業(yè)部總經(jīng)理Sandra Rivera表示:“英特爾致力于提供基于至強處理器和 Gaudi 深度學習加速器的業(yè)界領先的人工智能解決方案,以及開放、安全且易于編程的軟件,降低AI應用門檻,讓AI惠及所有人。對尋求高性能和高性價比的客戶來說,浪潮信息 NF5698G7 是絕佳選擇。我們將繼續(xù)與浪潮信息合作,在人工智能時代不斷創(chuàng)新。”

浪潮信息是全球領先的AI服務器廠商。據(jù)IDC數(shù)據(jù)報告顯示,浪潮信息在中國AI服務器市場份額連續(xù)六年保持第一。

(免責聲明:本網(wǎng)站內容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏,概不負任何法律責任。
任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內容可能涉嫌侵犯其知識產(chǎn)權或存在不實內容時,應及時向本網(wǎng)站提出書面權利通知或不實情況說明,并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關文章源頭核實,溝通刪除相關內容或斷開相關鏈接。 )