第293篇:400G/800G 光模块与高速互联

关键词

400GE、800GE、光模块、PAM4、相干光模块、硅光技术、CPO、OSFP、QSFP-DD、数据中心高速互联


一、光模块发展历程

1.1 从 10G 到 800G

光模块速率演进:

  ┌──────────────────────────────────────────┐
  │  2010: 10GE                               │
  │  ┌─ 接口:SFP+                           │
  │  ├─ 技术:NRZ(不归零码)                 │
  │  ├─ 光纤:单模 10km / 多模 300m          │
  │  └─ 功耗:~1W                            │
  │                                          │
  │  2015: 40GE / 100GE                       │
  │  ┌─ 接口:QSFP+ / CFP4                   │
  │  ├─ 100G: 4×25G NRZ                      │
  │  ├─ 光纤:单模 10-40km / 多模 100m       │
  │  └─ 功耗:~3.5W(100G)                   │
  │                                          │
  │  2020: 400GE                              │
  │  ┌─ 接口:QSFP-DD / OSFP                 │
  │  ├─ 技术:4×100G PAM4 / 8×50G PAM4      │
  │  ├─ 光纤:单模 2-10km / 500m(多模)      │
  │  └─ 功耗:~10-12W                         │
  │                                          │
  │  2024+: 800GE                             │
  │  ┌─ 接口:QSFP-DD800 / OSFP800           │
  │  ├─ 技术:8×100G PAM4                    │
  │  ├─ 光纤:单模 2-10km                    │
  │  └─ 功耗:~15-18W                         │
  │                                          │
  │  趋势:速率翻倍,功耗翻倍,光口倍增       │
  └──────────────────────────────────────────┘

1.2 数据中心速率需求

数据中心带宽需求驱动:

应用驱动 → 服务器速率 → 交换机端口 → 骨干 ┌─ AI 训练集群 ├─ 云数据中心 ├─ 超算中心 └─ DCI 互联 ├─ DC-to-DC:400G ZR / 800G ZR └─ 传输距离:2-120km ├─ 单 GPU 网卡:400G(当前) ├─ 单 GPU 网卡:800G(2025+) └─ 集群互联:400G/800G Spine-Leaf ├─ 服务器网卡:100G → 200G → 400G └─ ToR 上行:400G → 800G ├─ HPC 互联:400G InfiniBand / 以太网 └─ 存储互联:400G NVMe-oF

二、PAM4 调制技术

2.1 NRZ vs PAM4

PAM4(4 级脉冲幅度调制)是 400G/800G 的核心技术:

NRZ(2 级调制): ┌─ 每个 symbol 1 比特:0 / 1 ├─ 需要 4 个电平 ├─ 100G = 4×25G NRZ └─ SNR 裕量大

PAM4(4 级调制): ┌─ 每个 symbol 2 比特:00 / 01 / 10 / 11 ├─ 需要 4 个电平 ├─ 100G/λ = 1×100G PAM4(单波长) ├─ SNR 裕量小(只有 NRZ 的 1/3) └─ 需要 FEC(前向纠错)补偿

NRZ 波形: ┌───┐ ┌───┐ ┌───┐ └───┘──┘ └───┘──┘ └───┘ 2 种电平 PAM4 波形: 11 ┤ ┌───┐ 10 ┤───┐ 01 ┤ 00 ┤ ──┘ └───┘└──┘ 4 种电平 ┌─┤ ├──┐ ┌──┐

2.2 FEC 在高速光模块中的角色

高速光模块依赖 FEC(前向纠错):

  ┌──────────────────────────────────────────┐
  │  无 FEC:BER < 10^-12                      │
  │  ┌─ NRZ 短距离可达                        │
  │  └─ PAM4 无法达到                         │
  │                                            │
  │  FEC 前:BER ~ 10^-5 ~ 10^-4              │
  │  ┌─ PAM4 原始误码率                       │
  │  ├─ 眼睛张开度小(SNR 低)                │
  │  └─ 但可通过 FEC 纠正                     │
  │                                            │
  │  FEC 后:BER < 10^-15                      │
  │  ┌─ RS(544,514) FEC(IEEE 802.3 标准)    │
  │  ├─ 纠错能力:15 symbols/码字              │
  │  ├─ 编码增益:~6dB                        │
  │  └─ 开销:~5.8%(544→514)                │
  │                                            │
  │  FEC 类型:                               │
  │  ┌─ RS-FEC:RS(528,514) 用于 100G/200G    │
  │  ├─ RS-FEC:RS(544,514) 用于 400G/800G    │
  │  ├─ 级联 FEC:KP4 + 额外 FEC(更长距离) │
  │  └─ 软判决 FEC(SD-FEC):更高增益        │
  └──────────────────────────────────────────┘

三、400G/800G 光模块规格

3.1 400GE 光模块

400GE 主要光模块规格:

  ┌──────────────────────────────────────────┐
  │  400G QSFP-DD(Quad Small Form Factor)    │
  │  ┌─ 外形:双密度 QSFP                    │
  │  ├─ 电接口:8×50G PAM4                   │
  │  ├─ 功耗:10-12W                         │
  │  └─ 应用:交换机端口、服务器网卡           │
  │                                            │
  │  标准类型:                                │
  │                                            │
  │  400GBASE-SR8(多模,100m)               │
  │  ┌─ 8×50G PAM4,MPO-16 连接器             │
  │  ├─ OM4 光纤:100m                        │
  │  └─ 适合:机柜内互联                      │
  │                                            │
  │  400GBASE-DR4(单模,500m)               │
  │  ┌─ 4×100G PAM4,双工 LC                 │
  │  ├─ 单模光纤:500m                        │
  │  └─ 适合:ToR-Leaf 互联                  │
  │                                            │
  │  400GBASE-FR4(单模,2km)                │
  │  ┌─ 4 波长 CWDM,双工 LC                  │
  │  ├─ 距离:2km                             │
  │  └─ 适合:Leaf-Spine 互联                │
  │                                            │
  │  400GBASE-LR4(单模,10km)               │
  │  ┌─ 4 波长 LWDM,双工 LC                  │
  │  ├─ 距离:10km                            │
  │  └─ 适合:DC 间互联                       │
  │                                            │
  │  400G ZR(相干,80-120km)                │
  │  ┌─ 相干技术,DP-16QAM                    │
  │  ├─ QSFP-DD 封装                          │
  │  └─ 适合:DCI(数据中心互联)             │
  └──────────────────────────────────────────┘

3.2 800GE 光模块

800GE 光模块规格:

  ┌──────────────────────────────────────────┐
  │  800G QSFP-DD800 / OSFP800                │
  │  ┌─ 功耗:15-18W                          │
  │  ├─ 电接口:8×100G PAM4                  │
  │  └─ 外形稍大于 QSFP-DD                   │
  │                                            │
  │  800GBASE-SR8(多模,100m)               │
  │  ┌─ 8×100G PAM4                          │
  │  ├─ OM5 光纤:100m                        │
  │  └─ MPO-16 连接器                        │
  │                                            │
  │  800GBASE-DR8(单模,500m)               │
  │  ┌─ 8×100G PAM4(2×DR4)                  │
  │  ├─ 2×MPO-12 或 1×MPO-16                 │
  │  └─ 适合:Spine-Leaf                     │
  │                                            │
  │  800GBASE-FR8(单模,2km)                │
  │  ┌─ 8 波长 LWDM                          │
  │  └─ 双工 LC                               │
  │                                            │
  │  800G ZR(相干,120km)                   │
  │  ┌─ 800G 相干,QSFP-DD800 封装            │
  │  └─ 单波长 800G(64Gbaud 16QAM)         │
  └──────────────────────────────────────────┘

3.3 光模块规格对比

规格 速率 距离 技术 封装 功耗 应用
400G-SR8 400G 100m 8×50G PAM4 QSFP-DD 10W 机柜内
400G-DR4 400G 500m 4×100G PAM4 QSFP-DD 11W ToR-Leaf
400G-FR4 400G 2km 4λ CWDM QSFP-DD 12W Leaf-Spine
400G-LR4 400G 10km 4λ LWDM QSFP-DD 12W DC 互联
400G-ZR 400G 80km 相干 DP-16QAM QSFP-DD 15W DCI
800G-SR8 800G 100m 8×100G PAM4 QSFP-DD800 15W 机柜内
800G-DR8 800G 500m 8×100G PAM4 OSFP 16W Spine-Leaf
800G-ZR 800G 120km 800G 相干 QSFP-DD800 20W DCI

四、高速光模块的散热与功耗

4.1 功耗挑战

400G/800G 功耗挑战:

  功耗增长趋势:
  ┌─ 100G QSFP28: 3.5W
  ├─ 400G QSFP-DD: 10-12W(3×)
  ├─ 800G QSFP-DD800: 15-18W(5×)
  └─ 1.6T OSFP: 预计 25-30W

  交换机散热影响:
  32×400G = 320-384W(仅光模块)
  64×800G = 960-1152W(仅光模块)
  加上交换机 ASIC(500-800W)= 总功耗 1.5-2KW

  散热方案:
  ┌─ 被动散热(当前主流)
  │  通过 cage 传导到面板
  │  需要足够的风冷
  │
  ├─ 主动散热(光模块带风扇)
  │  小型风扇嵌入光模块外壳
  │  噪声和可靠性挑战
  │
  └─ 液冷散热(未来趋势)
      冷板直接接触光模块 cage
      适用于 1.6T+ 高功率场景

4.2 硅光技术

硅光(Silicon Photonics)技术优势:

  传统光模块:
  ┌─ 分立元件:激光器、调制器、探测器分离
  ├─ 手动对准、封装复杂
  └─ 成本高,良率受限

  硅光技术:
  ┌─ 在硅衬底上集成光器件
  ├─ 调制器、探测器、波导单芯片
  ├─ 可与 CMOS 工艺兼容
  ├─ 高良率、低成本
  └─ 体积小、功耗低

  硅光关键器件:
  ┌─ 硅基调制器:马赫-曾德尔调制器(MZM)
  ├─ 锗硅探测器(GeSi PD)
  ├─ 硅波导(低损耗)
  └─ 光纤耦合(光栅耦合器/端面耦合)

  当前进展:
  ┌─ 400G DR4 已批量采用硅光
  ├─ 800G 硅光方案已商用
  └─ CPO(共封装光学)将硅光与 ASIC 集成

五、CPO 共封装光学

5.1 CPO 架构

CPO(Co-Packaged Optics)——下一代交换机互连架构:

传统架构: | 交换 ASIC ┌────────────────────────────────┐ └────────────┬───────────────────┘ ▼ ┌────────────────────────────────┐ └────────────────────────────────┘ PCB 损耗 + 连接器损耗 + 功耗高 | SERDES (电信号, 112Gbps) PCB 走线 (5-10 英寸) 可插拔光模块 (QSFP-DD) 电→光转换 | | | --- | --- | --- |

CPO 架构: | 交换 ASIC ┌────────────────────────────────┐ └────────────┬───────────────────┘ ┌──────────┴──────────┐ └──────────┬──────────┘ 光纤跳线 (外连) | SERDES → 极短距离电互联 (< 1 英寸) 光学引擎 (OE) 硅光芯片 调制器 + 探测器 激光器 (外部/片上) 光纤阵列 (FAU) | | | --- | --- | --- |

5.2 CPO 优势

CPO 相比可插拔光模块的优势:

  1. 功耗降低(40-50%)
     ┌─ 省去 PCB 长走线的电损耗
     ├─ 省去连接器损耗(0.5-1dB 每连接)
     ├─ 省去 SERDES 重定时(Retimer)
     └─ 总功耗降低约 40%

  2. 密度提升(3-5×)
     ┌─ 可插拔 QSFP-DD × 32 = 12.8T
     ├─ CPO 光学引擎 × 64 = 51.2T+
     ├─ 每端口功耗更低
     └─ 同尺寸面板可集成更多端口

  3. 带宽提升
     ┌─ 可插拔限制:电连接器 112Gbps PAM4
     ├─ CPO 光学引擎:224Gbps+ PAM4
     └─ 为 1.6T / 3.2T 做准备

  4. 信号完整性
     ┌─ PCB 走线越短,信号质量越好
     ├─ 无需复杂的 PCB 均衡
     ├─ 降低误码率
     └─ 简化 PCB 设计

  CPO 的挑战:
  ┌─ 可维护性:光学引擎无法热插拔
  ├─ 激光器寿命:外部光源可靠性
  ├─ 光纤管理:大量光纤阵列的布放
  └─ 标准未统一:多厂商互操作

六、400G/800G 数据中心布线

6.1 光纤类型

高速互联光纤选择:

  多模光纤(MMF):
  ┌─ OM3:300m @ 100G, 100m @ 400G
  ├─ OM4:400m @ 100G, 150m @ 400G
  ├─ OM5:400m @ 100G, 150m @ 400G (SWDM)
  └─ 适用:机柜内/行间互联

  单模光纤(SMF):
  ┌─ OS2:2km+ @ 所有速率
  ├─ 成本更低(未来)
  └─ 适用:行间/列间/DCI

  趋势:单模光纤逐步替代多模
  ┌─ 400G DR4 使用单模
  ├─ 800G 以单模为主
  └─ 单模成本与传统多模逐渐持平

6.2 连接器类型

高速互联连接器:

  ┌──────────────────────────────────────────┐
  │  400G 常用连接器                           │
  │                                            │
  │  MPO-12(12 芯):                        │
  │  ┌─ 400G SR4(4×100G PAM4 用 8 芯)     │
  │  └─ 400G DR4(4×100G PAM4 用 8 芯)     │
  │                                            │
  │  MPO-16(16 芯):                        │
  │  └─ 400G SR8(8×50G PAM4 用 16 芯)     │
  │                                            │
  │  LC 双工:                                 │
  │  └─ 400G FR4/LR4(4 波长复用)           │
  │                                            │
  │  800G 常用连接器:                         │
  │  ┌─ MPO-16: 800G SR8 / DR8               │
  │  ├─ 2×MPO-12: 800G DR8(2×DR4)         │
  │  └─ LC 双工: 800G FR8/LR8               │
  └──────────────────────────────────────────┘

总结

关键点 说明
PAM4 4 级调制,每 symbol 2 比特,400G/800G 基础
FEC RS(544,514) 纠错,编码增益 ~6dB
400G 主流 QSFP-DD,DR4(500m)/FR4(2km)/LR4(10km)/ZR(80km)
800G 演进 QSFP-DD800/OSFP800,8×100G PAM4
硅光技术 CMOS 兼容集成光器件,降低成本
CPO 共封装光学,降低功耗 40%,提升密度 3-5×
布线趋势 单模光纤逐步替代多模

思考

  1. PAM4 相比 NRZ 有哪些优点和缺点?
  2. 为什么 400G 光模块需要 FEC?FEC 是如何工作的?
  3. 400G DR4、FR4、LR4、ZR 分别适用什么场景?
  4. 硅光技术相比传统铌酸锂光模块的优势是什么?
  5. CPO 相比可插拔光模块有哪些优势?面临什么挑战?
  6. 为什么数据中心布线正从多模光纤转向单模光纤?

下篇预告:第294篇 - CPRI/eCPRI 前传接口与无线云化,介绍前传承载技术和无线接入网络的云化演进。