DGX 服务器集群架构需要服务器、网卡、交换机、线缆、光模块等关键硬件。为实现AI 大模型训练、科学计 算等高算力需求工作，需要使用数百甚至上千个GPU 组成的计算单元作为算力基础评估、优化模型的配置和 参数。为了使这样一个庞大的计算单元能够有效发挥其效率，需要使用低延迟、高带宽的网络联接各个服务器 节点，以满足服务器/GPU 间计算、读取存储数据的互联通信需求，同时对整个集群系统进行管理。服务器集群 的网络系统包含服务器、网卡、交换机、线缆（包含光模块）等主要硬件。就网络构成来看，网卡搭载于服务 器内部，网卡直接与CPU 相连或通过PCIe Switch 与GPU 相连；一层交换机通过服务器机身的端口与服务器 内的网卡相连；线缆用于实现服务器-交换机、交换机-交换机间的连接，如果信息传输以光信号的形式实现，线 缆两端均需要搭载光模块。参考从DGX-1 到DGX H100 的服务器迭代历程，服务器搭载网卡数量、单端口支 持最高带宽均呈现出逐代次增加趋势；相应对支持更高传输速率的交换机、更高传输速率的线缆/光模块带来了 增量需求。

一、DGX 服务器集群架构需要服务器、网卡、交换机、线缆、光模块等关键硬件 ........... 5

（一）服务器 .............................................................................................................. 6

（二）网卡 ................................................................................................................. 9

（三）交换机 ............................................................................................................ 10

（四）线缆、光模块 ................................................................................................. 12

二、DGX A100 服务器集群中单颗A100 对应约7 颗200G 光模块需求 ......................... 14

（一）计算网络（COMPUTE FABRIC） ..................................................................... 15

（二）存储网络（STORAGE FABRIC） ...................................................................... 18

（三）IN-BAND 管理网络、OUT-OF-BAND 管理网络 ................................................. 19

（四）DGX A100 服务器集群中光模块/光芯片数量需求测算 .................................. 19

三、DGX H100 服务器集群中单颗H100 对应约1.5 颗800G 光模块+2 颗400G 光模块需

求 ...................................................................................................................................... 21

（一）计算网络（COMPUTE FABRIC） ..................................................................... 21

（二）存储网络（STORAGE FABRIC） ...................................................................... 22

（三）DGX H100 服务器集群中光模块/光芯片数量需求测算 .................................. 23

四、风险提示 .................................................................................................................... 24