Scale up 互连技术成为超节点方案的升级方向。Scale-out 是传统AI 数据中心的主流架构,随着大模型规模的快速提升,Scale-out 架构出现瓶颈:1)带宽与延迟瓶颈;2)能效较低;3)系统复杂度高。因此,行业逐步转向Scale-up架构,即在单节点内或紧密耦合节点增加GPU/CPU/存储等资源的数量,并通过PCIe、NVLink 等高速互连技术实现高带宽、低时延、高能效。超节点...
网页链接Scale up 互连技术成为超节点方案的升级方向。Scale-out 是传统AI 数据中心的主流架构,随着大模型规模的快速提升,Scale-out 架构出现瓶颈:1)带宽与延迟瓶颈;2)能效较低;3)系统复杂度高。因此,行业逐步转向Scale-up架构,即在单节点内或紧密耦合节点增加GPU/CPU/存储等资源的数量,并通过PCIe、NVLink 等高速互连技术实现高带宽、低时延、高能效。超节点...
网页链接
精彩评论