Skip to main content
Die deutsche Sprachversion wurde als Serviceleistung für Sie durch maschinelle Übersetzung erstellt. Bei eventuellen Unstimmigkeiten hat die englische Sprachversion Vorrang.

Richten Sie NVMe over RoCE auf der Host-Seite ein

Beitragende
PDFs

Die NVMe-Initiatorkonfiguration in einer RoCE-Umgebung umfasst die Installation und Konfiguration von rdma-Core- und nvme-cli-Paketen, die Konfiguration von Initiator-IP-Adressen und das Einrichten der NVMe-of-Schicht auf dem Host.

Bevor Sie beginnen

Sie müssen das neueste kompatible Betriebssystem RHEL 7, RHEL 8, RHEL 9, SUSE Linux Enterprise Server 12 oder 15 Service Pack ausführen. Siehe "NetApp Interoperabilitäts-Matrix-Tool" Für eine vollständige Liste der aktuellen Anforderungen.

Schritte

  1. rdma- und nvme-cli-Pakete installieren:

    SLES 12 oder SLES 15

    # zypper install rdma-core
# zypper install nvme-cli

    RHEL 7, RHEL 8 UND RHEL 9

    # yum install rdma-core
# yum install nvme-cli

  2. Installieren Sie für RHEL 8 und RHEL 9 Netzwerkskripte:

    RHEL 8

    # yum install network-scripts

    RHEL 9

    # yum install NetworkManager-initscripts-updown

  3. Holen Sie den Host-NQN ab, mit dem der Host für ein Array konfiguriert werden kann.

    # cat /etc/nvme/hostnqn

  4. Richten Sie IPv4-IP-Adressen auf den ethernet-Ports ein, die für die Verbindung von NVMe over RoCE verwendet werden. Erstellen Sie für jede Netzwerkschnittstelle ein Konfigurationsskript, das die verschiedenen Variablen für diese Schnittstelle enthält.

    Die in diesem Schritt verwendeten Variablen basieren auf der Server-Hardware und der Netzwerkumgebung. Die Variablen enthalten die IPADDR Und GATEWAY. Dies sind Beispielanweisungen für SLES und RHEL:

    SLES 12 und SLES 15

    Erstellen Sie die Beispieldatei /etc/sysconfig/network/ifcfg-eth4 Mit folgendem Inhalt:

    BOOTPROTO='static'
BROADCAST=
ETHTOOL_OPTIONS=
IPADDR='192.168.1.87/24'
GATEWAY='192.168.1.1'
MTU=
NAME='MT27800 Family [ConnectX-5]'
NETWORK=
REMOTE_IPADDR=
STARTMODE='auto'

    Erstellen Sie dann die Beispieldatei /etc/sysconfig/network/ifcfg-eth5:

    BOOTPROTO='static'
BROADCAST=
ETHTOOL_OPTIONS=
IPADDR='192.168.2.87/24'
GATEWAY='192.168.2.1'
MTU=
NAME='MT27800 Family [ConnectX-5]'
NETWORK=
REMOTE_IPADDR=
STARTMODE='auto'

    RHEL 7 oder RHEL 8

    Erstellen Sie die Beispieldatei /etc/sysconfig/network-scripts/ifcfg-eth4 Mit folgendem Inhalt:

    BOOTPROTO='static'
BROADCAST=
ETHTOOL_OPTIONS=
IPADDR='192.168.1.87/24’
GATEWAY='192.168.1.1'
MTU=
NAME='MT27800 Family [ConnectX-5]'
NETWORK=
REMOTE_IPADDR=
STARTMODE='auto'

    Erstellen Sie dann die Beispieldatei /etc/sysconfig/network-scripts/ifcfg-eth5:

    BOOTPROTO='static'
BROADCAST=
ETHTOOL_OPTIONS=
IPADDR='192.168.2.87/24'
GATEWAY='192.168.2.1'
MTU=
NAME='MT27800 Family [ConnectX-5]'
NETWORK=
REMOTE_IPADDR=
STARTMODE='auto'

    RHEL 9

    Verwenden Sie die nmtui Werkzeug zum Aktivieren und Bearbeiten einer Verbindung. Unten sehen Sie eine Beispieldatei /etc/NetworkManager/system-connections/eth4.nmconnection Das Tool generiert Folgendes:

    [connection]
id=eth4
uuid=<unique uuid>
type=ethernet
interface-name=eth4

[ethernet]
mtu=4200

[ipv4]
address1=192.168.1.87/24
method=manual

[ipv6]
addr-gen-mode=default
method=auto

[proxy]

    Unten sehen Sie eine Beispieldatei /etc/NetworkManager/system-connections/eth5.nmconnection Das Tool generiert Folgendes:

    [connection]
id=eth5
uuid=<unique uuid>
type=ethernet
interface-name=eth5

[ethernet]
mtu=4200

[ipv4]
address1=192.168.2.87/24
method=manual

[ipv6]
addr-gen-mode=default
method=auto

[proxy]

  5. Aktivieren der Netzwerkschnittstellen:

    # ifup eth4
# ifup eth5

  6. Legen Sie auf dem Host den NVMe-of-Layer fest. Erstellen Sie die folgende Datei unter /etc/modules-load.d/ Um die zu laden nvme_rdma Kernel-Modul und stellen Sie sicher, dass das Kernel-Modul immer eingeschaltet ist, auch nach einem Neustart:

    # cat /etc/modules-load.d/nvme_rdma.conf
  nvme_rdma

  7. Starten Sie den Host neu.

    Um die zu überprüfen nvme_rdma Kernel-Modul ist geladen, führen Sie diesen Befehl aus:

    # lsmod | grep nvme
nvme_rdma              36864  0
nvme_fabrics           24576  1 nvme_rdma
nvme_core             114688  5 nvme_rdma,nvme_fabrics
rdma_cm               114688  7 rpcrdma,ib_srpt,ib_srp,nvme_rdma,ib_iser,ib_isert,rdma_ucm
ib_core               393216  15 rdma_cm,ib_ipoib,rpcrdma,ib_srpt,ib_srp,nvme_rdma,iw_cm,ib_iser,ib_umad,ib_isert,rdma_ucm,ib_uverbs,mlx5_ib,qedr,ib_cm
t10_pi                 16384  2 sd_mod,nvme_core