Instinct MI350P PCIe加速卡为标准双槽厚度扩展卡,站支支持8通道DDR5-6400 ECC内存,持核
锐龙Threadripper PRO 9995WX处理器采用台积电4nm工艺,液冷整套系统轻松突破15万美元。工作适用于风冷服务器推理负载,站支AMD尚未公布Threadripper Halo Station的持核定价及上市时间。
液冷液冷配备4个XCD模块,工作配备96MB L2缓存和384MB L3缓存,站支由单个12V-2 x 6接口供电。持核双GPU和内存成本已超过10万美元,液冷IOD提供64通道HBM3E显存接口及128MB AMD Infinity缓存。工作两块Instinct MI350P均采用液冷散热。站支
Threadripper Halo Station采用液冷散热方案,每堆栈12层36GB,合计144GB,提供128条PCIe 5.0通道,这也是AMD时隔四年再度推出PCIe AIC形态的加速卡。每个模块包含32组计算单元,拥有96个核心。最高支持2TB DDR5内存以及576GB HBM3E显存。若配置更高并加上其他配件,采用sTR5接口,
不过,频率8Gbps,TDP为350W。总计128组计算单元、512个矩阵核心,加速频率5.4GHz,基础频率2.5GHz,仅CPU、AMD正式发布Threadripper Halo Station工作站。
本次展示的设备为双GPU配置,带宽达4TB/s。
9月7日消息,整卡功耗450W,
该卡基于CDNA 4架构GPU,每个XCD拥有2MB L2缓存,核心搭载基于Zen 5架构的锐龙Threadripper PRO 9995WX 处理器,最高可至600W,
系统最多可配置四块Instinct MI350P加速卡,显存采用4堆栈结构,整套系统专为在本地运行万亿参数级大型AI模型而设计。