Skip to main content
BeeGFS on NetApp with E-Series Storage
本繁體中文版使用機器翻譯,譯文僅供參考,若與英文版本牴觸,應以英文版本為準。

技術需求

貢獻者

若要在 NetApp 上實作 BeeGFS 解決方案、請確保您的環境符合本文件所述的技術需求。

硬體需求

開始之前、請先確認您的硬體符合下列規格、以便在 NetApp 解決方案上進行 BeeGFS 的單一第二代建置區塊設計。特定部署的確切元件可能會因客戶需求而異。

數量 硬體元件 需求

2.

BeeGFS 檔案節點

每個檔案節點都應符合或超過建議檔案節點的規格、以達到預期的效能。

  • 建議的檔案節點選項: *

  • * Lenovo ThinkSystem SR665 V*

    • * 處理器: * 2 個 AMD EPYC 9124 16C 3.0 GHz (設定為兩個 NUMA 區域)。

    • * 記憶體: * 256GB ( 16x 16GB TruDDR5 4800MHz RDIMM )

    • * PCIe 擴充: * 四個 PCIe Gen5 x16 插槽(每個 NUMA 區域兩個)

    • 雜項:

      • 適用於作業系統的 RAID 1 中有兩個磁碟機( 1TB 7.2K SATA 或更高)

      • 1GbE 連接埠、用於頻內 OS 管理

      • 1GbE BMC 搭配 Redfish API 、用於頻外伺服器管理

      • 雙熱交換電源供應器和效能風扇

  • * Lenovo ThinkSystem SR66*

    • * 處理器: * 2 個 AMD EPYC 7343 16C 3.2 GHz (設定為兩個 NUMA 區域)。

    • * 記憶體: * 256GB ( 16x 16GB TruDDR4 3200MHz RDIMM )

    • * PCIe 擴充: * 四個 PCIe Gen4 x16 插槽(每個 NUMA 區域兩個)

    • 雜項:

      • 適用於作業系統的 RAID 1 中有兩個磁碟機( 1TB 7.2K SATA 或更高)

      • 1GbE 連接埠、用於頻內 OS 管理

      • 1GbE BMC 搭配 Redfish API 、用於頻外伺服器管理

      • 雙熱交換電源供應器和效能風扇

2.

E-Series 區塊節點( EF600 陣列)

  • 記憶體: * 256GB (每個控制器 128GB )。* 介面卡: * 2 埠 200GB/HDR ( NVMe / IB )。* 磁碟機: * 設定為符合所需的中繼資料和儲存容量。

8.

InfiniBand 主機卡介面卡(適用於檔案節點)。

主機卡介面卡會因檔案節點所使用的伺服器機型而異。驗證檔案節點的建議包括:

  • * Lenovo ThinkSystem SR665 V3 伺服器: *

    • MCX755106AS-Heat ConnectX-7 、 NDR200 、 QSFP112 、 2 埠、 PCIe Gen5 x16 、 InfiniBand 介面卡

  • * Lenovo ThinkSystem SR665 伺服器: *

    • MCX653106A-HDAT ConnectX-6 、 HDR 、 QSFP-56 、 2 埠、 PCIe Gen4 x16 、 InfiniBand 介面卡

1.

儲存網路交換器

儲存網路交換器的 InfiniBand 速度必須達到 200Gb/s 。建議的交換器機型包括:

  • * NVIDIA QM9700 Quantum 2 NDR InfiniBand 交換器 *

  • * NVIDIA MQM8700 Quantum HDR InfiniBand 交換器 *

纜線需求

  • 從區塊節點直接連線至檔案節點。 *

數量 產品編號 長度

8.

MCP1650-H001E30 ( NVIDIA 被動銅線、 QSFP56 、 200Gb/s )

1M

  • 從檔案節點到儲存網路交換器的連線。 *根據您的 InfiniBand 儲存交換器、從下表中選取適當的纜線選項。+ 建議的纜線長度為 2 公尺;不過、這可能會因客戶的環境而異。

交換器模式 數量 纜線類型 產品編號

NVIDIA QM9700

4

主動式光纖

MFA7U10-H002 ( NVIDIA 主動式光纖纜線、 InfiniBand 400GB / 秒至 2x 200Gb/s 、 OSFP 至 2x QSFP56 )

NVIDIA QM9700

4

被動銅

MCP7Y60-H002 ( NVIDIA 被動式銅線、 InfiniBand 400GB / 秒至 2x 200Gb/s 、 OSFP 至 2x QSFP56 )

NVIDIA MQM8700

8.

主動式光纖

MFS1S00-H003E ( NVIDIA 主動式光纖纜線、 InfiniBand 200Gb/s 、 QSFP56 )

NVIDIA MQM8700

8.

被動銅

MCP1650-H002E26 ( NVIDIA 被動式銅線、 InfiniBand 200Gb/s 、 QSFP56 )

軟體需求

為了達到可預測的效能與可靠性、NetApp解決方案上的BeeGFS版本會測試採用實作解決方案所需的特定軟體元件版本。

檔案節點需求

軟體 版本

RedHat Enterprise Linux

RedHat 9.3伺服器實體配備高可用度(2插槽)。

重要 檔案節點需要有效的RedHat Enterprise Linux Server訂閱和Red Hat Enterprise Linux高可用度附加元件。

Linux核心

5.14.0-362.24.1.el9_3.x86_64

InfiniBand / RDMA驅動程式

MLNX_OFED_LINOD-23.10-3.2.0-LTS

HCA 韌體

  • ConnectX-7 HCA 韌體 * 韌體: 28.39.1002 + PXE : 3.7.0201 + UEFI : 14.32.0012

  • ConnectX-6 HCA 韌體 * 韌體: 20.31.1014 + PXE : 3.6.0403 + UEFI : 14.24.0013

EF600區塊節點需求

軟體 版本

作業系統SANtricity

11.80.0

NVSRAM

N6000-880834-D08.dp

磁碟機韌體

最新版本適用於使用中的磁碟機機型。

軟體部署需求

下表列出在以Ansible為基礎的BeeGFS部署中、自動部署的軟體需求。

軟體 版本

BeeGFS

7.4.4..

電暈器同步

3.1.5-4.

起搏器

2.1.4-5.

OpenSM

OpenSM-5.17.2 (來自 MLNX_OFED_LINOS-23.10-3.2.0-LTS )

Ansible控制節點需求

NetApp上的BeeGFS解決方案是從可存取的控制節點進行部署和管理。如需詳細資訊、請參閱 "Ansible文件"

下表所列的軟體需求、是下列NetApp BeeGFS Ansible系列產品的特定版本。

軟體 版本

Ansible

透過 Pip 安裝 6.x : Ansable-6.0.0 和 Ansible 核心 >= 2.13.0

Python

3.9 (或更新版本)

其他Python套件

密碼編譯 -43.0.0 、 netaddr-1.3.0 、 ipaddr-2.2.0

NetApp E-Series BeeGFS Ansible Collection

3.2.0