Skip to main content
BeeGFS on NetApp with E-Series Storage
简体中文版经机器翻译而成,仅供参考。如与英语版出现任何冲突,应以英语版为准。

技术要求

贡献者

要实施基于NetApp的BeeGFS解决方案、请确保您的环境满足本文档中概述的技术要求。

硬件要求

开始之前、请确保您的硬件满足基于NetApp的BeeGFS解决方案的第二代组件设计的以下规格。根据客户要求、特定部署的确切组件可能会有所不同。

数量 硬件组件 要求

2.

BeeGFS文件节点

每个文件节点都应满足或超出建议文件节点的规格、以实现预期性能。

建议的文件节点选项:

  • *Lenovo ThinkSystem SR国际 电脑公司

    • 处理器: 2个AMD EPYC 9124 16C 3.0 GHz (配置为两个NUMA分区)。

    • 内存: 256 GB (16个16 GB TruDR5 4800MHz RDIM-A)

    • *PCIe扩展:*四个PCIe Gen5 x16插槽(每个NUMA分区两个)

    • 其他:

      • 在RAID 1中为操作系统配置两个驱动器(1 TB 7.2K SATA或更高)

      • 用于带内操作系统管理的1GbE端口

      • 采用Redfish API的1GbE BMC、用于带外服务器管理

      • 双热插拔电源和性能风扇

  • Lenovo ThinkSystem SR7SE

    • 处理器: 2个AMD EPYC 7343 16C 3.2 GHz (配置为两个NUMA分区)。

    • 内存: 256 GB (16个16 GB TruDDR4 3200 MHz RDIMM A)

    • *PCIe扩展:*四个PCIe Gen4 x16插槽(每个NUMA分区两个)

    • 其他:

      • 在RAID 1中为操作系统配置两个驱动器(1 TB 7.2K SATA或更高)

      • 用于带内操作系统管理的1GbE端口

      • 采用Redfish API的1GbE BMC、用于带外服务器管理

      • 双热插拔电源和性能风扇

2.

E-Series块节点(EF600阵列)

内存: 256 GB (每个控制器128 GB)。适配器: 2端口200GB/HDR (NVMe/IB)。*驱动器:*配置为匹配所需元数据和存储容量。

8.

InfiniBand主机卡适配器(适用于文件节点)。

主机卡适配器因文件节点使用的服务器型号而异。针对经验证的文件节点的建议包括:

  • Lenovo ThinkSystem SR6SR V3服务器:

    • MCX755106AS-热连接X-7、NDR200、QSFP112、双端口、PCIe Gen5 x16、 InfiniBand适配器

  • Lenovo ThinkSystem SR6SR服务器:

    • MCX65546A-HDAT ConnectX-6、HDR、QP-56、双端口、PCIe Gen4 x16、 InfiniBand适配器

1.

存储网络交换机

存储网络交换机必须支持200 Gb/秒的InfiniBand速度。建议的交换机型号包括:

  • * NVIDIA QM9700昆特2 NDNS InfiniBand交换机*

  • * NVIDIA MMM4700多模HDR InfiniBand交换机*

布线要求

从块节点直接连接到文件节点。

数量 部件号 长度

8.

NVIDIA 1500-H001E30 (无源铜缆、QSFP56、200 GB/秒)

1 个月

*从文件节点连接到存储网络交换机。*根据您的InfiniBand存储交换机、从下表中选择适当的缆线选项。+建议的电缆长度为2米;但是、这可能会因客户环境而异。

交换机型号 数量 电缆类型 部件号

NVIDIA QM9700

4

活动光纤

MFA7U10-H002 (NVIDIA有源光纤电缆、InfiniBand 400Gb/s到2个200Gb/s、OSFP到2个QSFP56)

NVIDIA QM9700

4

无源铜线

NVIDIA 7Y60-H002 (无源铜缆、InfiniBand 400Gb/s到2个200Gb/s、OSFP到2个QSFP56)

NVIDIA MqM8700

8.

活动光纤

MFS1S00-H003C (NVIDIA有源光纤电缆、InfiniBand 200Gb/秒、QFP56)

NVIDIA MqM8700

8.

无源铜线

NVIDIA 1500-H002E26 (无源铜缆、InfiniBand 200Gb/秒、QSFP56)

软件要求

为了获得可预测的性能和可靠性、NetApp解决方案 上的BeeGFS版本会使用实施解决方案 所需的特定版本软件组件进行测试。

文件节点要求

软件 version

RedHat Enterprise Linux

具有高可用性的RedHat 9.3 Server物理服务器(双插槽)。

重要说明 文件节点需要有效的RedHat Enterprise Linux Server订阅和Red Hat Enterprise Linux高可用性附加软件。

Linux内核

5.14.0-362.24.1.el9_3.x86_64

InfiniBand / RDMA驱动程序

MLNR_OFED_LINUX-23.10-3.2.0.2-LTS

HCA固件

*ConnectX-7 HCA固件*固件:28.39.1002+ PXE:3.7.0201 + UEFI:14.32.0012

ConnectX-6 HCA Firmware FW:20.31.1014 + PXE:3.6.0403 + UEFI:14.24.0013

EF600块节点要求

软件 version

SANtricity 操作系统

11.80.0

NVSRAM

N6000-880834-D08.DLP

驱动器固件

适用于所用驱动器型号的最新版本。

软件部署要求

下表列出了在基于Ansible的BeeGFS部署中自动部署的软件要求。

软件 version

BeeGFS

7.4.4

核心同步

3.1.5-4.

起搏器

2.1.4-5.

opensm

opensm-5.13.2 (来自MLNR_OFED_LINUX-23.10-3.2.0.2-LTS)

Ansible控制节点要求

NetApp解决方案 上的BeeGFS可从Ansible控制节点进行部署和管理。有关详细信息,请参见 "Ansible文档"

下表中列出的软件要求特定于下面列出的NetApp BeeGFS Ansible集合版本。

软件 version

Ansible

通过pip安装时为6.x:Ansight-6.0.0和Ansight-core >= 2.13.0

Python

3.9 (或更高版本)

其他Python软件包

加密法-43.0.0、netaddr-1.3.0、ipaddr-2.2.0

NetApp E-Series BeeGFS折叠资料集

3.2.0