Skip to main content
BeeGFS on NetApp with E-Series Storage
本繁體中文版使用機器翻譯,譯文僅供參考,若與英文版本牴觸,應以英文版本為準。

技術需求

貢獻者 mcwhiteside netapp-jsnyder netapp-jolieg iamjoemccormick

若要在 NetApp 上實作 BeeGFS 解決方案、請確保您的環境符合本文件所述的技術需求。

需求概述

本頁面詳細介紹了在 NetApp 建置模組上實現 BeeGFS 的硬體、軟體和韌體要求。這些要求分為以下幾個部分:

硬體需求

在開始之前,請確保您的硬體符合以下針對 BeeGFS on NetApp 解決方案的單一建置區塊設計的規格。特定部署的確切元件可能會因客戶需求而有所不同。每個檔案節點都應符合或超過這些規格,以達到預期效能。

檔案節點需求

數量 規格

2.

  • Lenovo ThinkSystem SR665 V*

硬體:

  • 處理器: 2x AMD EPYC 9124 16C 3.0 GHz (配置為兩個 NUMA 區域)

  • * 記憶體: * 256GB ( 16x 16GB TruDDR5 4800MHz RDIMM )

  • * PCIe 擴充: * 四個 PCIe Gen5 x16 插槽(每個 NUMA 區域兩個)

  • HCA 卡: 4x MCX755106AS-HEAT ConnectX-7、NDR200、QSFP112、2 埠、PCIe Gen5 x16、InfiniBand 轉接器

  • 儲存: 作業系統使用兩個磁碟機組成 RAID 1(1TB 7.2K SATA 或更高規格)

  • 管理: 1GbE 連接埠,用於頻內作業系統管理

  • BMC: 1GbE BMC 搭配 Redfish API,用於頻外伺服器管理

  • *電源:*雙熱插拔電源和高性能風扇

軟體和韌體:

  • 作業系統: Red Hat 9.4 Server Physical with High Availability (2 個插槽)

  • Linux Kernel: 5.14.0-427.42.1.el9_4.x86_64

  • HCA 韌體: FW:28.46.1006、PXE:3.8.0100、UEFI:14.39.0013

重要 檔案節點需要有效的 Red Hat Enterprise Linux Server 訂閱和 Red Hat Enterprise Linux High Availability Add-On。

區塊節點要求

每個建置區塊需要兩個相同型號的 E-Series 陣列。請勿在同一個建置區塊中混用不同型號的陣列。

數量 模型 規格

2.

EF600

硬體:

  • 記憶體: 256GB (每個控制器 128GB)

  • 適配器: 2 埠 200Gb/HDR(NVMe/IB)

  • 磁碟機: 設定為符合所需的中繼資料和儲存容量

韌體:

  • SANtricity OS: 11.90R5

  • NVSRAM: N6000-890834-D03

  • *Drive Firmware:*適用於您驅動器型號的最新版本(請參閱 "E-Series 磁碟韌體站台"

儲存網路交換器要求

數量 規格

1.

NVIDIA QM9700 Quantum 2 NDR InfiniBand 交換器

儲存網路交換器必須能夠達到 200Gb/s InfiniBand 速度。NVIDIA QM9700 是此叢集建議使用的交換器。

註 也可以使用 NVIDIA MQM8700 Quantum 等其他交換機,但需要不同的線纜。

纜線需求

區塊節點到檔案節點纜線

從區塊節點到檔案節點的直接連線需要下列纜線:

數量 電纜規格 長度

8.

MCP1650-H001E30 - NVIDIA 被動銅纜、QSFP56、200Gb/s

1M

檔案節點至儲存交換器纜線

建議 NVIDIA QM9700 Quantum 2 交換器使用以下線纜類型。根據您的需求選擇有源光纖或無源銅纜。數量為每個構建模組。

交換器模式 纜線類型 數量 產品編號

NVIDIA QM9700

主動式光纖(包括收發器)

2.

MMA4Z00-NS (多重模式, IB/ETH , 800Gb/s 2x400Gb/s 雙埠 OFP )

4

MFP7E20-Nxxx (多重模式, 4 通道對兩條 2 通道分離器光纖纜線)

8.

MMA1Z00-NS400 (多重模式, IB/ETH , 400GB / 秒單埠 QSFP-112 )

被動銅

2.

MCP7Y40-N002 ( NVIDIA 被動銅線分離器纜線, InfiniBand 800Gb/s 至 4x 200Gb/s , OSFP 至 4x QSFP112 )

軟體部署需求

下表列出在以Ansible為基礎的BeeGFS部署中、自動部署的軟體需求。

軟體 版本

BeeGFS

8.2.2

電暈器同步

3.1.8-1

起搏器

2.1.7-5.2

圍欄代理(紅魚 / APC )

4.10.0-62

InfiniBand / RDMA驅動程式

DOCA-OFED-25.04-0.6.1

Ansible控制節點需求

NetApp上的BeeGFS解決方案是從可存取的控制節點進行部署和管理。如需詳細資訊、請參閱 "Ansible文件"

下表所列的軟體需求、是下列NetApp BeeGFS Ansible系列產品的特定版本。

軟體 版本

Ansible 核心

>= 2.19.0

Python

3.12

其他Python套件

Cryptography-46.0.3 、 netaddr-1.3.0 、 ipaddr-2.2.0

NetApp E-Series BeeGFS Ansible Collection

4.0.0