第293篇:400G/800G 光模块与高速互联
关键词
400GE、800GE、光模块、PAM4、相干光模块、硅光技术、CPO、OSFP、QSFP-DD、数据中心高速互联
一、光模块发展历程
1.1 从 10G 到 800G
光模块速率演进:
┌──────────────────────────────────────────┐
│ 2010: 10GE │
│ ┌─ 接口:SFP+ │
│ ├─ 技术:NRZ(不归零码) │
│ ├─ 光纤:单模 10km / 多模 300m │
│ └─ 功耗:~1W │
│ │
│ 2015: 40GE / 100GE │
│ ┌─ 接口:QSFP+ / CFP4 │
│ ├─ 100G: 4×25G NRZ │
│ ├─ 光纤:单模 10-40km / 多模 100m │
│ └─ 功耗:~3.5W(100G) │
│ │
│ 2020: 400GE │
│ ┌─ 接口:QSFP-DD / OSFP │
│ ├─ 技术:4×100G PAM4 / 8×50G PAM4 │
│ ├─ 光纤:单模 2-10km / 500m(多模) │
│ └─ 功耗:~10-12W │
│ │
│ 2024+: 800GE │
│ ┌─ 接口:QSFP-DD800 / OSFP800 │
│ ├─ 技术:8×100G PAM4 │
│ ├─ 光纤:单模 2-10km │
│ └─ 功耗:~15-18W │
│ │
│ 趋势:速率翻倍,功耗翻倍,光口倍增 │
└──────────────────────────────────────────┘
1.2 数据中心速率需求
数据中心带宽需求驱动:
| 应用驱动 → 服务器速率 → 交换机端口 → 骨干 ┌─ AI 训练集群 ├─ 云数据中心 ├─ 超算中心 └─ DCI 互联 ├─ DC-to-DC:400G ZR / 800G ZR └─ 传输距离:2-120km | ├─ 单 GPU 网卡:400G(当前) ├─ 单 GPU 网卡:800G(2025+) └─ 集群互联:400G/800G Spine-Leaf ├─ 服务器网卡:100G → 200G → 400G └─ ToR 上行:400G → 800G ├─ HPC 互联:400G InfiniBand / 以太网 └─ 存储互联:400G NVMe-oF |
|---|---|
二、PAM4 调制技术
2.1 NRZ vs PAM4
PAM4(4 级脉冲幅度调制)是 400G/800G 的核心技术:
NRZ(2 级调制): ┌─ 每个 symbol 1 比特:0 / 1 ├─ 需要 4 个电平 ├─ 100G = 4×25G NRZ └─ SNR 裕量大
PAM4(4 级调制): ┌─ 每个 symbol 2 比特:00 / 01 / 10 / 11 ├─ 需要 4 个电平 ├─ 100G/λ = 1×100G PAM4(单波长) ├─ SNR 裕量小(只有 NRZ 的 1/3) └─ 需要 FEC(前向纠错)补偿
| NRZ 波形: ┌───┐ ┌───┐ ┌───┐ └───┘──┘ └───┘──┘ └───┘ 2 种电平 PAM4 波形: 11 ┤ ┌───┐ 10 ┤───┐ 01 ┤ 00 ┤ ──┘ └───┘└──┘ 4 种电平 | ┌─┤ ├──┐ ┌──┐ | |||||||
|---|---|---|---|---|---|---|---|---|
2.2 FEC 在高速光模块中的角色
高速光模块依赖 FEC(前向纠错):
┌──────────────────────────────────────────┐
│ 无 FEC:BER < 10^-12 │
│ ┌─ NRZ 短距离可达 │
│ └─ PAM4 无法达到 │
│ │
│ FEC 前:BER ~ 10^-5 ~ 10^-4 │
│ ┌─ PAM4 原始误码率 │
│ ├─ 眼睛张开度小(SNR 低) │
│ └─ 但可通过 FEC 纠正 │
│ │
│ FEC 后:BER < 10^-15 │
│ ┌─ RS(544,514) FEC(IEEE 802.3 标准) │
│ ├─ 纠错能力:15 symbols/码字 │
│ ├─ 编码增益:~6dB │
│ └─ 开销:~5.8%(544→514) │
│ │
│ FEC 类型: │
│ ┌─ RS-FEC:RS(528,514) 用于 100G/200G │
│ ├─ RS-FEC:RS(544,514) 用于 400G/800G │
│ ├─ 级联 FEC:KP4 + 额外 FEC(更长距离) │
│ └─ 软判决 FEC(SD-FEC):更高增益 │
└──────────────────────────────────────────┘
三、400G/800G 光模块规格
3.1 400GE 光模块
400GE 主要光模块规格:
┌──────────────────────────────────────────┐
│ 400G QSFP-DD(Quad Small Form Factor) │
│ ┌─ 外形:双密度 QSFP │
│ ├─ 电接口:8×50G PAM4 │
│ ├─ 功耗:10-12W │
│ └─ 应用:交换机端口、服务器网卡 │
│ │
│ 标准类型: │
│ │
│ 400GBASE-SR8(多模,100m) │
│ ┌─ 8×50G PAM4,MPO-16 连接器 │
│ ├─ OM4 光纤:100m │
│ └─ 适合:机柜内互联 │
│ │
│ 400GBASE-DR4(单模,500m) │
│ ┌─ 4×100G PAM4,双工 LC │
│ ├─ 单模光纤:500m │
│ └─ 适合:ToR-Leaf 互联 │
│ │
│ 400GBASE-FR4(单模,2km) │
│ ┌─ 4 波长 CWDM,双工 LC │
│ ├─ 距离:2km │
│ └─ 适合:Leaf-Spine 互联 │
│ │
│ 400GBASE-LR4(单模,10km) │
│ ┌─ 4 波长 LWDM,双工 LC │
│ ├─ 距离:10km │
│ └─ 适合:DC 间互联 │
│ │
│ 400G ZR(相干,80-120km) │
│ ┌─ 相干技术,DP-16QAM │
│ ├─ QSFP-DD 封装 │
│ └─ 适合:DCI(数据中心互联) │
└──────────────────────────────────────────┘
3.2 800GE 光模块
800GE 光模块规格:
┌──────────────────────────────────────────┐
│ 800G QSFP-DD800 / OSFP800 │
│ ┌─ 功耗:15-18W │
│ ├─ 电接口:8×100G PAM4 │
│ └─ 外形稍大于 QSFP-DD │
│ │
│ 800GBASE-SR8(多模,100m) │
│ ┌─ 8×100G PAM4 │
│ ├─ OM5 光纤:100m │
│ └─ MPO-16 连接器 │
│ │
│ 800GBASE-DR8(单模,500m) │
│ ┌─ 8×100G PAM4(2×DR4) │
│ ├─ 2×MPO-12 或 1×MPO-16 │
│ └─ 适合:Spine-Leaf │
│ │
│ 800GBASE-FR8(单模,2km) │
│ ┌─ 8 波长 LWDM │
│ └─ 双工 LC │
│ │
│ 800G ZR(相干,120km) │
│ ┌─ 800G 相干,QSFP-DD800 封装 │
│ └─ 单波长 800G(64Gbaud 16QAM) │
└──────────────────────────────────────────┘
3.3 光模块规格对比
| 规格 | 速率 | 距离 | 技术 | 封装 | 功耗 | 应用 |
|---|---|---|---|---|---|---|
| 400G-SR8 | 400G | 100m | 8×50G PAM4 | QSFP-DD | 10W | 机柜内 |
| 400G-DR4 | 400G | 500m | 4×100G PAM4 | QSFP-DD | 11W | ToR-Leaf |
| 400G-FR4 | 400G | 2km | 4λ CWDM | QSFP-DD | 12W | Leaf-Spine |
| 400G-LR4 | 400G | 10km | 4λ LWDM | QSFP-DD | 12W | DC 互联 |
| 400G-ZR | 400G | 80km | 相干 DP-16QAM | QSFP-DD | 15W | DCI |
| 800G-SR8 | 800G | 100m | 8×100G PAM4 | QSFP-DD800 | 15W | 机柜内 |
| 800G-DR8 | 800G | 500m | 8×100G PAM4 | OSFP | 16W | Spine-Leaf |
| 800G-ZR | 800G | 120km | 800G 相干 | QSFP-DD800 | 20W | DCI |
四、高速光模块的散热与功耗
4.1 功耗挑战
400G/800G 功耗挑战:
功耗增长趋势:
┌─ 100G QSFP28: 3.5W
├─ 400G QSFP-DD: 10-12W(3×)
├─ 800G QSFP-DD800: 15-18W(5×)
└─ 1.6T OSFP: 预计 25-30W
交换机散热影响:
32×400G = 320-384W(仅光模块)
64×800G = 960-1152W(仅光模块)
加上交换机 ASIC(500-800W)= 总功耗 1.5-2KW
散热方案:
┌─ 被动散热(当前主流)
│ 通过 cage 传导到面板
│ 需要足够的风冷
│
├─ 主动散热(光模块带风扇)
│ 小型风扇嵌入光模块外壳
│ 噪声和可靠性挑战
│
└─ 液冷散热(未来趋势)
冷板直接接触光模块 cage
适用于 1.6T+ 高功率场景
4.2 硅光技术
硅光(Silicon Photonics)技术优势:
传统光模块:
┌─ 分立元件:激光器、调制器、探测器分离
├─ 手动对准、封装复杂
└─ 成本高,良率受限
硅光技术:
┌─ 在硅衬底上集成光器件
├─ 调制器、探测器、波导单芯片
├─ 可与 CMOS 工艺兼容
├─ 高良率、低成本
└─ 体积小、功耗低
硅光关键器件:
┌─ 硅基调制器:马赫-曾德尔调制器(MZM)
├─ 锗硅探测器(GeSi PD)
├─ 硅波导(低损耗)
└─ 光纤耦合(光栅耦合器/端面耦合)
当前进展:
┌─ 400G DR4 已批量采用硅光
├─ 800G 硅光方案已商用
└─ CPO(共封装光学)将硅光与 ASIC 集成
五、CPO 共封装光学
5.1 CPO 架构
CPO(Co-Packaged Optics)——下一代交换机互连架构:
传统架构: | 交换 ASIC ┌────────────────────────────────┐ └────────────┬───────────────────┘ ▼ ┌────────────────────────────────┐ └────────────────────────────────┘ PCB 损耗 + 连接器损耗 + 功耗高 | SERDES (电信号, 112Gbps) PCB 走线 (5-10 英寸) 可插拔光模块 (QSFP-DD) 电→光转换 | | | --- | --- | --- |
CPO 架构: | 交换 ASIC ┌────────────────────────────────┐ └────────────┬───────────────────┘ ┌──────────┴──────────┐ └──────────┬──────────┘ 光纤跳线 (外连) | SERDES → 极短距离电互联 (< 1 英寸) 光学引擎 (OE) 硅光芯片 调制器 + 探测器 激光器 (外部/片上) 光纤阵列 (FAU) | | | --- | --- | --- |
5.2 CPO 优势
CPO 相比可插拔光模块的优势:
1. 功耗降低(40-50%)
┌─ 省去 PCB 长走线的电损耗
├─ 省去连接器损耗(0.5-1dB 每连接)
├─ 省去 SERDES 重定时(Retimer)
└─ 总功耗降低约 40%
2. 密度提升(3-5×)
┌─ 可插拔 QSFP-DD × 32 = 12.8T
├─ CPO 光学引擎 × 64 = 51.2T+
├─ 每端口功耗更低
└─ 同尺寸面板可集成更多端口
3. 带宽提升
┌─ 可插拔限制:电连接器 112Gbps PAM4
├─ CPO 光学引擎:224Gbps+ PAM4
└─ 为 1.6T / 3.2T 做准备
4. 信号完整性
┌─ PCB 走线越短,信号质量越好
├─ 无需复杂的 PCB 均衡
├─ 降低误码率
└─ 简化 PCB 设计
CPO 的挑战:
┌─ 可维护性:光学引擎无法热插拔
├─ 激光器寿命:外部光源可靠性
├─ 光纤管理:大量光纤阵列的布放
└─ 标准未统一:多厂商互操作
六、400G/800G 数据中心布线
6.1 光纤类型
高速互联光纤选择:
多模光纤(MMF):
┌─ OM3:300m @ 100G, 100m @ 400G
├─ OM4:400m @ 100G, 150m @ 400G
├─ OM5:400m @ 100G, 150m @ 400G (SWDM)
└─ 适用:机柜内/行间互联
单模光纤(SMF):
┌─ OS2:2km+ @ 所有速率
├─ 成本更低(未来)
└─ 适用:行间/列间/DCI
趋势:单模光纤逐步替代多模
┌─ 400G DR4 使用单模
├─ 800G 以单模为主
└─ 单模成本与传统多模逐渐持平
6.2 连接器类型
高速互联连接器:
┌──────────────────────────────────────────┐
│ 400G 常用连接器 │
│ │
│ MPO-12(12 芯): │
│ ┌─ 400G SR4(4×100G PAM4 用 8 芯) │
│ └─ 400G DR4(4×100G PAM4 用 8 芯) │
│ │
│ MPO-16(16 芯): │
│ └─ 400G SR8(8×50G PAM4 用 16 芯) │
│ │
│ LC 双工: │
│ └─ 400G FR4/LR4(4 波长复用) │
│ │
│ 800G 常用连接器: │
│ ┌─ MPO-16: 800G SR8 / DR8 │
│ ├─ 2×MPO-12: 800G DR8(2×DR4) │
│ └─ LC 双工: 800G FR8/LR8 │
└──────────────────────────────────────────┘
总结
| 关键点 | 说明 |
|---|---|
| PAM4 | 4 级调制,每 symbol 2 比特,400G/800G 基础 |
| FEC | RS(544,514) 纠错,编码增益 ~6dB |
| 400G 主流 | QSFP-DD,DR4(500m)/FR4(2km)/LR4(10km)/ZR(80km) |
| 800G 演进 | QSFP-DD800/OSFP800,8×100G PAM4 |
| 硅光技术 | CMOS 兼容集成光器件,降低成本 |
| CPO | 共封装光学,降低功耗 40%,提升密度 3-5× |
| 布线趋势 | 单模光纤逐步替代多模 |
思考
- PAM4 相比 NRZ 有哪些优点和缺点?
- 为什么 400G 光模块需要 FEC?FEC 是如何工作的?
- 400G DR4、FR4、LR4、ZR 分别适用什么场景?
- 硅光技术相比传统铌酸锂光模块的优势是什么?
- CPO 相比可插拔光模块有哪些优势?面临什么挑战?
- 为什么数据中心布线正从多模光纤转向单模光纤?
下篇预告:第294篇 - CPRI/eCPRI 前传接口与无线云化,介绍前传承载技术和无线接入网络的云化演进。