浪潮NF5698G7系列AI服務器是浪潮信息全新一代開放加速計算服務器,符合全球開放計算OCP開放加速器規(guī)范OAM v1.1/v1.5,可在6U空間內(nèi)支持8顆54V開放加速模塊(OAM)和2顆Intel®第四代/第五代至強®可擴展處理器(TDP 350W),具有高性能、高擴展性、高能效、多元兼容、生態(tài)開放等特點,適用于大模型訓練、自然語言處理、語音識別、圖像處理、推薦等典型的AI應用場景。
型號 NF5698-M7-A0-R0-00 |
|
高度 |
6U |
GPU |
8顆符合OAMv1.1/v1.5規(guī)范的開放加速模塊,TDP 700W |
處理器 |
2顆Intel®第四代/第五代至強®可擴展處理器,TDP 350W
標配4個,插槽數(shù)8個 |
內(nèi)存 |
32條DDR5 DIMMs內(nèi)存, 速率支持5600MT/s |
存儲 |
支持24塊2.5英寸SSD硬盤,其中支持16塊NVMe |
M.2 |
2塊內(nèi)置M.2 NVMe/SATA (可選) |
PCIe插槽 |
支持10個PCIe 5.0 x16插槽(其中1個PCIe 5.0 x16插槽可替換為2個PCIe 5.0 x8速率的x16槽位) 可選支持Blue?eld-3、CX7以及多種類型智能網(wǎng)卡 |
RAID支持 |
可選支持RAID 0/1/10/5/50/6/60等, 支持Cache超 級電容保護 |
前置I/O |
1個USB 3.0端口, 1個USB 2.0端口, 1個VGA端口 |
后置I/O |
2個USB 3.0端口, 1個MicroUSB端口, 1個VGA端口, 1個RJ45管理口 |
OCP |
可選支持1張OCP 3.0網(wǎng)卡, 支持NCSI功能 |
管理 |
DC-SCM BMC管理模組 |
TPM模塊 |
TPM 2.0 |
風扇模組 |
GPU區(qū)域:6個54V N+1冗余熱插拔風扇 CPU區(qū)域:6個12V N+1冗余熱插拔風扇 |
電源 |
2塊12V 3200W及6塊54V 2700W鈦金級CRPS電源,支持N+N冗余 |
尺寸 |
寬447mm,高263mm,深860mm |
重量 |
凈重90kg(毛重:125kg) |
環(huán)境參數(shù) |
工作溫度:10℃~35℃; 貯存溫度: -40℃~70℃ 工作濕度:10%~80% R.H.; 貯存濕度:10%~93% R.H. |
產(chǎn)品特性
性能
■ 支持8顆符合OAM v1.1和v1.5的開放加速模組(TDP 700W)和2顆Intel®第四代/第五代至強®可擴展處理器 (TDP 350W)
■ 全互聯(lián)拓撲滿足大模型訓練張量并行每秒數(shù)百GB 通信需求,節(jié)點內(nèi)每顆OAM芯片可實現(xiàn)784GB/s的P2P峰值聚合通信帶寬(注:Gaudi3每顆OAM芯片的聚合帶寬是1TB/s,Gaudi2是512GB/s)
擴展
■ 支持4.0 Tbps節(jié)點間網(wǎng)絡帶寬,可實現(xiàn)OAM模組:計算IB: 存儲IB=8:8:2 的配比 (注:怎么配的?)
■ 支持RDMA網(wǎng)絡進行計算和存儲通信,滿足大模型流水線并行、 數(shù)據(jù)并行等通信需求
■ 支持Scale-Out直連架構,OAM模組可以通過QSFP模塊實現(xiàn)跨節(jié)點高速通信
能效
■ 12V和54V電源分離供電設計,支持N+N冗余
■ 精細化分區(qū),智能散熱調(diào)控,散熱性能優(yōu)化, 風道解耦設計提升20%系統(tǒng)能效比
■ 高功率負載動態(tài)匹配,零電源轉(zhuǎn)換損耗
生態(tài)
■ 全球開放計算OCP開放加速器規(guī)范OAMv1.1 /UBBv1.5
■ 支持PyTorch / TensorFlow / PaddlePaddle等主流AI框架和Megatron / DeepSpeed等開發(fā)工具
■ 支持自然語言處理、語音識別、圖像處理、推薦等各類AI應用場景
已搭載GPU
Gaudi2
浪潮信息于2023年第三季度推出Gaudi 2服務器NF5698G7。該服務器集成了八顆Habana® Gaudi®2 HL-225B加速器以及雙插槽第四代Xeon處理器,并符合OCP OAM和US BIS EAR標準。浪潮信息的Gaudi 2 G7服務器提供了高度可擴展的、深度學習訓練和推理性能。
來源 AI時代窗口