中断式机架布局#

本文档是 NVIDIA DGX SuperPOD:采用 NVIDIA DGX H100 系统的数据中心设计 的一部分。

本节详细介绍了一些解决数据中心架构特征导致的机架布局挑战的方案。在所有情况下,高架线缆梯架或线槽必须跨越障碍物两侧的机架,以便于跨越间隙进行布线。

使用本文档了解以下内容

克服连续机架的障碍#

图 2 显示了如何容纳特定地点的障碍物(在本例中为行内的结构柱)的顶视图。

Obstructions to contiguous DGX SuperPOD deployments

图 2. 连续 DGX SuperPOD 部署的障碍#

注意

在此示例中,线槽已放置在更靠近机架后部的位置,以避开障碍物。如果障碍物位于机架后部,则可能需要将线槽移向机架前部。虽然这并非理想方案,但优于绕过障碍物弯曲线槽。通道封闭隔板代替了缺失的机架,以确保热通道/冷通道的完整性得到维护。

跨两排机架部署#

图 3 显示了如何修改标准布局以将机架放置在两排中。当跨越多排时,电缆长度是一个重要因素。对于将 DGX H100 系统连接到叶交换机的任何 InfiniBand 多模光缆,总传输距离不得超过 50 米;为了获得最佳系统性能,电缆长度应限制在 30 米以内。

Spanning across two rows of racks (top view of racks)

图 3. 跨两排机架部署(机架顶视图)#

使用单模光缆进行交换机到交换机互连的最大距离为 500 米。这些距离不能使用中间中继器或交换机来延长。对于提供多个桥接相邻行的架空或地板下线槽,电缆应布线到提供到达目标机架最短路径的桥接。