Skip to main content
BeeGFS on NetApp with E-Series Storage
简体中文版经机器翻译而成,仅供参考。如与英语版出现任何冲突,应以英语版为准。

技术要求

贡献者 mcwhiteside netapp-jsnyder netapp-jolieg iamjoemccormick

要实施基于NetApp的BeeGFS解决方案、请确保您的环境满足本文档中概述的技术要求。

要求概述

本页面详细介绍在 NetApp 构建模块上实施 BeeGFS 的硬件、软件和固件要求。要求分为以下几个部分:

硬件要求

在开始之前,请确保您的硬件符合 BeeGFS on NetApp 解决方案的单个构建块设计的以下规范。根据客户要求,特定部署的确切组件可能会有所不同。每个文件节点应满足或超过这些规范,以实现预期性能。

文件节点要求

数量 规格

2.

*Lenovo ThinkSystem SR国际 电脑公司

硬件:

  • 处理器: 2x AMD EPYC 9124 16C 3.0 GHz(配置为两个 NUMA 区域)

  • 内存: 256 GB (16个16 GB TruDR5 4800MHz RDIM-A)

  • *PCIe扩展:*四个PCIe Gen5 x16插槽(每个NUMA分区两个)

  • HCA 卡: 4x MCX755106AS-HEAT ConnectX-7, NDR200, QSFP112, 2-port, PCIe Gen5 x16, InfiniBand Adapter

  • 存储: 用于操作系统的 RAID 1 中的两个驱动器(1TB 7.2K SATA 或更高)

  • 管理: 1GbE 端口,用于带内 OS 管理

  • BMC: 带有 Redfish API 的 1GbE BMC,用于带外服务器管理

  • 电源: 双热插拔电源和性能风扇

软件和固件:

  • 操作系统: Red Hat 9.4 Server Physical with High Availability (2 socket)

  • Linux 内核: 5.14.0-427.42.1.el9_4.x86_64

  • HCA 固件: FW:28.46.1006,PXE:3.8.0100,UEFI:14.39.0013

重要说明 文件节点需要有效的 Red Hat Enterprise Linux Server 订阅和 Red Hat Enterprise Linux High Availability Add-On。

块节点要求

每个构建模块需要两个相同型号的 E-Series 阵列。请勿在同一构建模块中混合阵列型号。

数量 型号 规格

2.

EF600

硬件:

  • 内存: 256GB(每个控制器 128GB)

  • 适配器: 2 端口 200Gb/HDR (NVMe/IB)

  • *驱动器:*配置以匹配所需的元数据和存储容量

固件:

  • SANtricity 操作系统: 11.90R5

  • NVSRAM: N6000-890834-D03

  • 驱动器固件: 最新可用于您的驱动器型号(请参阅 "E-Series磁盘固件站点"

存储网络交换机要求

数量 规格

1.

NVIDIA QM9700 Quantum 2 NDR InfiniBand 交换机

存储网络交换机必须能够达到 200Gb/s InfiniBand 速度。NVIDIA QM9700 是集群推荐的交换机。

备注 可以使用 NVIDIA MQM8700 Quantum 等替代交换机,但需要不同的电缆。

布线要求

块节点到文件节点电缆

从块节点到文件节点的直接连接需要以下电缆:

数量 电缆规格 长度

8.

MCP1650-H001E30 - NVIDIA 无源铜缆,QSFP56,200Gb/s

1 个月

文件节点到存储交换机电缆

建议为 NVIDIA QM9700 Quantum 2 交换机使用以下电缆类型。根据您的要求选择有源光纤或无源铜缆。数量按构建块计算。

交换机型号 电缆类型 数量 部件号

NVIDIA QM9700

有源光纤(包括收发器)

2.

MMA4Z00-NS (多模式、IB/ETH、800 Gb/秒2x400 Gb/秒双端口OSFP)

4

MFP7E20-Nxxx (多模式、4通道到2通道分路器光缆)

8.

MMA1Z00-NS400 (多模式、IB/ETH、400 Gb/秒单端口QP-112)

无源铜线

2.

NVIDIA 7Y40-N002 (InfiniBand无源铜缆分路器电缆、InfiniBand 800Gb/s到4个200Gb/s、OSFP到4个QSFP112)

软件部署要求

下表列出了在基于Ansible的BeeGFS部署中自动部署的软件要求。

软件 version

BeeGFS

8.2.2

核心同步

3.1.8-1.

起搏器

2.1.7-5.2.

Fence Agent (红鱼/APC)

4.10.0-62.

InfiniBand / RDMA驱动程序

DOCA-OFED-25.04-0.6.1

Ansible控制节点要求

NetApp解决方案 上的BeeGFS可从Ansible控制节点进行部署和管理。有关详细信息,请参见 "Ansible文档"

下表中列出的软件要求特定于下面列出的NetApp BeeGFS Ansible集合版本。

软件 version

Ansore-core

>= 2.19.0

Python

3.12

其他Python软件包

Cryptography-46.0.3,netaddr-1.3.0,ipaddr-2.2.0

NetApp E-Series BeeGFS折叠资料集

4.0.0