两台服务器、16颗NPU、背靠背FullMesh互联——Atlas 650E双机方案将单机8颗NPU扩展为16P超节点集群，互联总带宽达8×1.68TB/s。华为自研UB协议承载超节点内部通信，通过OSFP光模块实现跨框高速互联，为大模型训练提供低延迟、高带宽的集群级通信能力。

Atlas 650E双机场景通过两台服务器背靠背FullMesh互联组网，形成16P超节点集群。每台服务器集成8颗Ascend 950DT NPU，两台服务器共16颗NPU通过光纤背靠背FullMesh全互联。双机服务器配备32个UB接口（OSFP封装，800Gbps），用于实现两台服务器之间的高速互联通信。

每个NPU模组支持15个UB端口和1个参数面端口。框内互联层面，每个NPU通过7个UB端口与其他NPU互联，实现8个NPU FullMesh全互联，确保框内任意两颗NPU之间通信只需一跳，延迟极低。出框互联层面，每个NPU通过8个UB端口与其他NPU互联，跨框通信通过光纤实现光互连。
双机场景NPU互联理论总带宽达8×1.68TB/s（双向），单机场景框内NPU互联理论带宽为ALL to ALL双向784GB/s（7×112GB/s）。双机方案将框间互联带宽提升至单机框内互联的约2.14倍，显著增强跨服务器通信能力。

UB（Unified Bus）是华为自研的统一总线协议，专门用于AI集群内部的高速互联通信。Atlas 650E双机场景前面板配备32个UB接口，采用OSFP封装，每个接口数据传输速率为800Gbps。每个NPU抽屉直出16×800Gbps接口，整机共64个800Gbps UB接口通道。
UB接口配备LINK/ACT指示灯：绿色常亮表示网络连接正常，绿色闪烁（1Hz）表示有数据正在传输，熄灭表示网络未连接或降Lane连接。接口支持热插拔光模块，便于现场维护和故障更换。

双机场景支持多种OSFP光模块类型：OSFP-800G-VR8支持800Gbps传输速率，目标传输距离50米（OM4光纤），采用MPO-16连接器，工作光温15℃~70℃。OSFP-800G-2×SR4支持800Gbps传输速率，目标传输距离100米（OM4光纤），采用Dual MPO-12连接器。OSFP LPO-800G-VR8为低功耗线性直驱方案，支持800Gbps传输速率，目标传输距离50米（OM4光纤），工作光温20℃~55℃。QSFP112-400G-SR4支持400Gbps传输速率，用于参数面接口互联。

16P超节点集群将16颗NPU整合为统一算力池，FP16总算力达7.776PFLOPs（双机合计）。结合8×1.68TB/s的超高互联带宽，可显著降低大模型训练中跨服务器通信的延迟开销，提升集群线性加速比。面向千亿参数级别的大模型预训练场景，16P超节点集群提供了从算力密度到通信效率的完整解决方案。