Skip to main content
E-Series storage systems
La versione in lingua italiana fornita proviene da una traduzione automatica. Per eventuali incoerenze, fare riferimento alla versione in lingua inglese.

Configurare l'iniziatore NVMe su RoCE sull'host in e-Series - Linux

Collaboratori netapp-driley netapp-jsnyder netapp-jolieg NetAppZacharyWambold

La configurazione di NVMe Initiator in un ambiente RoCE include l'installazione e la configurazione dei pacchetti rdma-core e nvme-cli, la configurazione degli indirizzi IP dell'iniziatore e l'impostazione del layer NVMe-of sull'host.

Prima di iniziare

È necessario utilizzare il sistema operativo RHEL 9, RHEL 10, SLES 15 o SLES 16 con il service pack più recente e compatibile. Consultare la "Tool di matrice di interoperabilità NetApp" per un elenco completo dei requisiti più recenti.

Fasi
  1. Installare i pacchetti rdma e nvme-cli:

    SLES 15 o SLES 16

    # zypper install rdma-core
    # zypper install nvme-cli

    RHEL 9 e RHEL 10

    # yum install rdma-core
    # yum install nvme-cli
Nota Se si utilizza una NVIDIA HCA e si desidera utilizzare il driver DOCA esterno, fare riferimento alla "Documentazione NVIDIA DOCA" per informazioni su come installarlo correttamente in questo ambiente.
  1. Per RHEL 9, installare gli script di rete:

    RHEL 9

    # yum install NetworkManager-initscripts-updown
    Nota Gli script di rete non sono disponibili per RHEL 10.
  2. Ottenere l'NQN host, che verrà utilizzato per configurare l'host in un array.

    # cat /etc/nvme/hostnqn
  3. Impostare gli indirizzi IP IPv4 sulle porte ethernet utilizzate per collegare NVMe su RoCE. Per ciascuna interfaccia di rete, creare uno script di configurazione che contenga le diverse variabili per tale interfaccia.

    Le variabili utilizzate in questa fase si basano sull'hardware del server e sull'ambiente di rete. Le variabili includono IPADDR e. GATEWAY. Queste sono istruzioni di esempio per SLES e RHEL:

    SLES 15

    Crea il file di esempio /etc/sysconfig/network/ifcfg-eth4 con il seguente contenuto, dove MTU è impostato sul valore più alto che può essere raggiunto senza frammentazione dei pacchetti (di solito 9000).

    BOOTPROTO='static'
    BROADCAST=
    ETHTOOL_OPTIONS=
    IPADDR='192.168.1.87/24'
    GATEWAY='192.168.1.1'
    MTU=9000
    NAME='MT27800 Family [ConnectX-5]'
    NETWORK=
    REMOTE_IPADDR=
    STARTMODE='auto'

    Quindi, creare il file di esempio /etc/sysconfig/network/ifcfg-eth5:

    BOOTPROTO='static'
    BROADCAST=
    ETHTOOL_OPTIONS=
    IPADDR='192.168.2.87/24'
    GATEWAY='192.168.2.1'
    MTU=9000
    NAME='MT27800 Family [ConnectX-5]'
    NETWORK=
    REMOTE_IPADDR=
    STARTMODE='auto'

    RHEL 9, RHEL 10 o SLES 16

    Utilizzare nmtui per attivare e modificare una connessione. Di seguito è riportato un file di esempio /etc/NetworkManager/system-connections/eth4.nmconnection il tool genera:

    [connection]
    id=eth4
    uuid=<unique uuid>
    type=ethernet
    interface-name=eth4
    
    [ethernet]
    mtu=9000
    
    [ipv4]
    address1=192.168.1.87/24
    method=manual
    
    [ipv6]
    addr-gen-mode=default
    method=auto
    
    [proxy]

    Di seguito è riportato un file di esempio /etc/NetworkManager/system-connections/eth5.nmconnection il tool genera:

    [connection]
    id=eth5
    uuid=<unique uuid>
    type=ethernet
    interface-name=eth5
    
    [ethernet]
    mtu=9000
    
    [ipv4]
    address1=192.168.2.87/24
    method=manual
    
    [ipv6]
    addr-gen-mode=default
    method=auto
    
    [proxy]
  4. Abilitare le interfacce di rete:

    # nmcli connection up eth4
    # nmcli connection up eth5
  5. Impostare il livello NVMe-of sull'host. Creare il seguente file in /etc/modules-load.d/ per caricare nvme_rdma kernel e assicurarsi che il modulo kernel sia sempre attivo, anche dopo un riavvio:

    # cat /etc/modules-load.d/nvme_rdma.conf
      nvme_rdma
  6. Riavviare l'host.

    1. In alternativa, è possibile caricare il nvme_rdma kernel senza riavviare il sistema eseguendo questo comando:

      # modeprobe nvme_rdma
  7. Verifica che il nvme_rdma kernel module sia caricato, esegui questo comando:

    # lsmod | grep nvme
    nvme_rdma              36864  0
    nvme_fabrics           24576  1 nvme_rdma
    nvme_core             114688  5 nvme_rdma,nvme_fabrics
    rdma_cm               114688  7 rpcrdma,ib_srpt,ib_srp,nvme_rdma,ib_iser,ib_isert,rdma_ucm
    ib_core               393216  15 rdma_cm,ib_ipoib,rpcrdma,ib_srpt,ib_srp,nvme_rdma,iw_cm,ib_iser,ib_umad,ib_isert,rdma_ucm,ib_uverbs,mlx5_ib,qedr,ib_cm
    t10_pi                 16384  2 sd_mod,nvme_core
    Quali sono le prossime novità?

    Dopo aver configurato l'initiator NVMe tramite RoCE sull'host, "configurare le impostazioni della porta NVMe over RoCE".