NDR 组件互连#

本节讨论互连 NDR 交换机和端点的选项。

NDR 铜缆连接#

图 18 显示了 NDR 铜缆系列。它包括 DAC 和 ACC。DAC 不需要端口功率,但传输距离有限;ACC 消耗端口功率来放大信号(大约每个连接器 1.5 瓦)并延长传输距离。铜缆主要用于机架内或相邻机架之间。

图 18. 铜缆连接

_images/ndr-infiniband-06.png

交换机到交换机电缆组件的两端都有一个鳍片式 OSFP 连接器,它们之间有一对铜缆。这两根电缆在逻辑上是独立的 InfiniBand 链路。

将交换机连接到 NDR 适配器的电缆组件在交换机端有一个鳍片式 OSFP 连接器,以及两根铜缆,每根铜缆都以扁平式 OSFP 连接器结尾。在 DPU 空间受限的情况下,两根铜缆以 QSFP112 连接器结尾。

当适配器或 DPU 具有 ND200 端口 (200 Gbps) 时,交换机端的每个 OSFP 连接器都分成双铜缆,使用两条数据通道而不是四条。可以连接四个适配器或四个 DPU。对于 DPU,电缆以 QSFP112 连接器结尾,否则以扁平式 OSFP 连接器结尾。

将 NDR 交换机连接到 HDR 和 EDR 的铜缆在 NDR 连接到 HDR 和 EDR 中讨论。

NDR 交换机到交换机光纤连接#

图 19 显示了使用 MPO/APC 光纤互连交换机的三种选项。

图 19. 交换机到交换机光纤

_images/ndr-infiniband-07.png

对于最长 30 米的单模光纤,可以使用成对的 ‘NL’ OSFP 收发器。使用 ‘NS’ 收发器可以实现最长 100 米的距离,但 ‘NS’ 收发器的成本更高,功耗也比 ‘NS’ 型号更高。‘NL’ 收发器端口可以连接到 ‘NS’ 端口,但最大距离将为 30 米。

多模光纤和多模 OSFP 收发器可以将交换机连接到最远 50 米的距离。这是最便宜的光纤选项,并且需要的端口功率最少。

一对光纤可以具有不同的长度。非 MPO/APC 的电缆(例如用于 HDR 和 EDR 的电缆)将无法工作。多模和单模收发器将无法互操作。

NDR 交换机到端点光纤连接#

有多种光纤选项可以将交换机连接到适配器和 DPU。单模和多模之间的可用配置有所不同。单模可用于最远 30 米的适配器连接,但不适用于 DPU,如图 20 所示。

图 20. 单模光纤到适配器

_images/ndr-infiniband-08.png

NDR 适配器通过以下方式连接:交换机端使用 OSFP 鳍片式双 ‘NL’ 收发器,最长 30 米的单模 MPO/APC 光纤,以及适配器端口处的 OSFP 扁平式单模收发器。

对于 NDR200 适配器,双向单模分路器与适配器处的 200 Gbps OSFP 扁平式单模收发器一起使用。两个分路器中的每一个都可以具有不同的长度。与往常一样,物理光纤分路发生在共享 MPO 连接器附近。

多模光纤提供最远 50 米的到适配器和 DPU 的连接。请参见图 21。

图 21. 多模光纤到适配器和 DPU

_images/ndr-infiniband-09.png

NDR 和 NDR200 适配器的多模选项与单模类似。交换机和适配器端口处的收发器外形尺寸相同,都使用多模版本。最大距离为 50 米,并且需要的端口功率更少。

多模还提供 DPU 连接,其中 DPU 收发器外形尺寸为 QSFP112。NDR 和 NDR200 双分路器连接的最长距离可达 50 米。

两个分路器中的每一个都可以具有不同的长度。多模分路器系列对于 DPU 和适配器链路是相同的。

NDR 连接到 HDR 和 EDR#

图 22 显示了与 HDR 和 EDR 互操作的电缆。DAC 电缆用于最远 2 米的距离,AOC 电缆提供最远 30 米的距离。这些电缆可用于将 NDR 结构连接到上一代交换机和适配器,并且可以在同一 NDR 交换机上与 NDR 铜缆和光缆混合使用。

图 22. NDR 到 HDR 和 EDR

_images/ndr-infiniband-10.png

图 22 的上半部分显示了 HDR 互操作性的解决方案。所有选项都在交换机端使用一个 OSFP 双连接器,并在另一端分支为适当的 QSFP 变体。物理分路位置靠近 OSFP。

图的下半部分涵盖了与 EDR 的互操作性。EDR 无法分路,因此选项较少。请注意,100 Gbps EDR 和 100 Gbps HDR100 并不相同:EDR 是四条 25 Gbps 通道,而 HDR100 是两条 50 Gbps 通道。

请注意,没有 ACC 电缆,也没有非分路电缆。没有简单的方法使用光纤将 NDR 连接到 HDR 或 EDR,因为以前的 InfiniBand 光模块和光纤电缆不支持 MPO/APC。