跳转到内容

拥塞、抖动与网络故障

同步训练中任何一条链路的抖动都会拖慢全局。本章讨论 incast 拥塞、ECMP 哈希不均、光模块误码等常见原因,以及通信层面的诊断方法。

  • 一根光模块的误码率升高足以让万卡训练慢 20%
  • 定期跑 NCCL 测试建立带宽基线
  • 流量工程:多路径与自适应路由