连接集群内 AI 芯片的高速网络系统。
AI 集群网络像围棋对局的传子手:慢半拍,成千上万块 GPU 就会互相等着落子。
训练和推理时,它决定多芯片能否及时交换数据、协同计算。
GPU高速网络让多块 GPU 能及时交换训练和推理所需的数据。
Distributed Computing分布式计算依赖网络在多台机器间分发任务、汇总结果。
Model Parallelism模型切分到多张卡后,网络承载频繁的跨卡数据通信。