Skip to main content
日本語は機械翻訳による参考訳です。内容に矛盾や不一致があった場合には、英語の内容が優先されます。

RCFバージョンのアップグレード - Cisco Nexus 9364D-GX2A

共同作成者 netapp-lisa netapp-yvonneo

Cisco Nexus 9364D-GX2A スイッチのリファレンス構成ファイル(RCF)のバージョンをアップグレードして、新しいハードウェア、新しい ONTAP バージョンのサポート、または AFX 1K や AFX 2K システム構成における新しい NX-OS バージョンへの対応を実現します。

メモ RCFのバージョンをサポートされていないバージョンにアップグレードまたはダウングレードしないでください。
開始する前に
  • "RCF のインストールまたはアップグレードの概要"ページを読んでいる必要があります。

  • スイッチの設定に関する最新のバックアップがあることを確認してください。

  • クラスターが完全に機能していることを確認してください。つまり、ログにエラーや同様の問題がないことを確認してください。

  • 最新のRCFバージョンが必要です。

  • RCFファイルには、目的のブートイメージを反映したブート構成が必要です。

    現在のブート イメージを反映するようにブート設定を変更する必要がある場合は、あとでリブートしたときに正しいバージョンがインスタンス化されるように、RCFを再適用する前に変更する必要があります。

タスク概要
  • クラスタの運用に支障をきたさないようにするため、この手順では、ターゲットスイッチで手順を実行しながら、クラスタのすべてのLIFを運用パートナーのスイッチに移行します。

  • この手順では、スイッチ間リンク(ISL)の運用は必要ありません。これは意図的な設計であり、RCF のバージョン変更は ISL 接続に一時的に影響を与える可能性があるためです。

  • この手順では、ONTAP コマンドと Cisco Nexus 9000 シリーズスイッチのコマンドを使用するため、各手順にはコマンドを入力する際に使用する CLI が示されています。

  • この手順の例で使用するスイッチとノードの名前は次のとおりです。

    • 2 つのCiscoスイッチの名前は cs1 と cs2 です。

    • ノード名は、node1-01、node1-02、node1-03、node1-04 です。

    • クラスタ LIF 名は次のとおりです。

      • node1-01 の node1-01_clus1 と node1-01_clus2

      • node1-02 の node1-02_clus1 と node1-02_clus2

      • node1-03 の node1-03_clus1 と node1-03_clus2

      • node1-04 の node1-04_clus1 と node1-04_clus2

    • その `cluster1::*>`プロンプトはクラスターの名前を示します。

  • この手順で示す例は、RCF 10.0を実行しているスイッチを備えたAFX 1Kシステムを対象としています。AFX 2Kシステムをお持ちの場合、入力と出力は異なる場合があります。

ステップ1: アップグレードの準備

以下の手順では ONTAP CLI を使用して、必要に応じて自動ケース作成を抑制し、ポートの管理ステータスと運用ステータスを確認し、クラスタ LIF の自動リバートを無効にすることで、RCF アップグレードの準備を行います。

  1. このクラスタでAutoSupportが有効になっている場合は、AutoSupportメッセージを呼び出してケースの自動作成を抑制します。

    system node autosupport invoke -node * -type all -message MAINT=<number of hours down>h
  2. 続行するかどうかを尋ねられたら y と入力して、権限レベルを「advanced」に変更します。

    set -privilege advanced

    advancedのプロンプト(*>)が表示されます。

  3. スイッチに接続されている各ノード上のクラスター ポートを表示します。

    network device-discovery show
    例を表示
    cluster1::*> network device-discovery show
    
    Node/       Local  Discovered
    Protocol    Port   Device (LLDP: ChassisID)  Interface         Platform
    ----------- ------ ------------------------- ----------------  --------
    node1-01/cdp
                e10a   cs1(FLMXXXXXXXX)         Ethernet1/16/3    N9K-C9364D-GX2A
                e10b   cs1(FDOXXXXXXXX)         Ethernet1/13/3    N9K-C9364D-GX2A
                e11a   cs1(FLMXXXXXXXX)         Ethernet1/16/4    N9K-C9364D-GX2A
                e11b   cs1(FDOXXXXXXXX)         Ethernet1/13/4    N9K-C9364D-GX2A
                e1a    cs1(FLMXXXXXXXX)         Ethernet1/16/1    N9K-C9364D-GX2A
                e1b    cs1(FDOXXXXXXXX)         Ethernet1/13/1    N9K-C9364D-GX2A
                .
                .
                .
                e7a    cs1(FLMXXXXXXXX)         Ethernet1/16/2    N9K-C9364D-GX2A
                e7b    cs1(FDOXXXXXXXX)         Ethernet1/13/2    N9K-C9364D-GX2A
    node1-01/lldp
                e10a   cs1 (c8:60:8f:xx:xx:xx)   Ethernet1/16/3    -
                e10b   cs2 (04:e3:87:xx:xx:xx)   Ethernet1/16/3    -
                e11a   cs1 (c8:60:8f:xx:xx:xx)   Ethernet1/16/4    -
                e11b   cs2 (04:e3:87:xx:xx:xx)   Ethernet1/16/4    -
                e1a    cs1 (c8:60:8f:xx:xx:xx)   Ethernet1/16/1    -
                e1b    cs2 (04:e3:87:xx:xx:xx)   Ethernet1/16/1    -
                .
                .
                .
                e7a    cs1 (c8:60:8f:xx:xx:xx)   Ethernet1/16/2    -
                e7b    cs2 (04:e3:87:xx:xx:xx)   Ethernet1/16/2    -
    .
    .
    .
  4. 各ポートの管理および動作ステータスを確認します。

    1. クラスターポート

      1. すべてのクラスター ポートが正常な状態で稼働していることを確認します。

        network port show -ipspace Cluster
        例を表示
        cluster1::*> network port show -ipspace Cluster
        
        Node: node1-01
                                                                               Ignore
                                                          Speed(Mbps) Health   Health
        Port      IPspace      Broadcast Domain Link MTU  Admin/Oper  Status   Status
        --------- ------------ ---------------- ---- ---- ----------- -------- ------
        e7a       Cluster      Cluster          up   9000  auto/100000 healthy false
        e7b       Cluster      Cluster          up   9000  auto/100000 healthy false
        
        Node:node1-02
                                                                               Ignore
                                                          Speed(Mbps) Health   Health
        Port      IPspace      Broadcast Domain Link MTU  Admin/Oper  Status   Status
        --------- ------------ ---------------- ---- ---- ----------- -------- ------
        e7a       Cluster      Cluster          up   9000  auto/100000 healthy false
        e7b       Cluster      Cluster          up   9000  auto/100000 healthy false
        
        Node: node1-03
        
                                                                            Ignore
                                                          Speed(Mbps) Health   Health
        Port      IPspace      Broadcast Domain Link MTU  Admin/Oper  Status   Status
        --------- ------------ ---------------- ---- ---- ----------- -------- ------
        e7a       Cluster      Cluster          up   9000  auto/10000 healthy  false
        e7b       Cluster      Cluster          up   9000  auto/10000 healthy  false
        
        Node: node1-04
                                                                               Ignore
                                                          Speed(Mbps) Health   Health
        Port      IPspace      Broadcast Domain Link MTU  Admin/Oper  Status   Status
        --------- ------------ ---------------- ---- ---- ----------- -------- ------
        e7a       Cluster      Cluster          up   9000  auto/10000 healthy  false
        e7b       Cluster      Cluster          up   9000  auto/10000 healthy  false
        cluster1::*>
      2. すべてのクラスタ インターフェイス (LIF) がホーム ポート上にあることを確認します。

        network interface show -role cluster
        例を表示
        cluster1::*> network interface show -role cluster
                    Logical          Status      Network           Current      Current Is
        Vserver     Interface        Admin/Oper  Address/Mask      Node         Port    Home
        ----------- ---------------- ----------- ----------------- ------------ ------- ----
        Cluster
                    node1-01_clus1   up/up       169.254.3.4/23    node1-01     e7a     true
                    node1-01_clus2   up/up       169.254.3.5/23    node1-01     e7b     true
                    node1-02_clus1   up/up       169.254.3.8/23    node1-02     e7a     true
                    node1-02_clus2   up/up       169.254.3.9/23    node1-02     e7b     true
                    node1-03_clus1   up/up       169.254.1.3/23    node1-03     e7a     true
                    node1-03_clus2   up/up       169.254.1.1/23    node1-03     e7b     true
                    node1-04_clus1   up/up       169.254.1.6/23    node1-04     e7a     true
                    node1-04_clus2   up/up       169.254.1.7/23    node1-04     e7b     true
        8 entries were displayed.
      3. クラスターに両方のスイッチの情報が表示されることを確認します。

        system cluster-switch show -is-monitoring-enabled-operational true
        例を表示
        cluster1::*> system cluster-switch show -is-monitoring-enabled-operational true
        Switch                      Type               Address          Model
        --------------------------- ------------------ ---------------- -----
        cs1(FDOXXXXXXXX)            cluster-network    10.228.137.233   N9K-C9364D-GX2A
             Serial Number: FDOXXXXXXXX
              Is Monitored: true
                    Reason: None
          Software Version: Cisco Nexus Operating System (NX-OS) Software, Version
                            10.4(2)
            Version Source: CDP/ISDP
        
        cs2(FLMXXXXXXXX)            cluster-network    10.228.137.234   N9K-C9364D-GX2A
             Serial Number: FLMXXXXXXXX
              Is Monitored: true
                    Reason: None
          Software Version: Cisco Nexus Operating System (NX-OS) Software, Version
                            10.4(2)
            Version Source: CDP/ISDP
    2. HAポート

      1. すべての HA ポートが正常な状態で稼働していることを確認します。

        ha interconnect status show -node <node-name>
        例を表示
        cluster1::*> ha interconnect status show -node node1-01
          (system ha interconnect status show)
        
                               Node: node1-01
                      Link 0 Status: up
                      Link 1 Status: up
                   Is Link 0 Active: true
                   Is Link 1 Active: true
                 IC RDMA Connection: up
                               Slot: 0
                     Debug Firmware: no
        
        
        Interconnect Port 0 :
                          Port Name: e1a-17
                                MTU: 4096
                   Link Information: ACTIVE
        
        
        Interconnect Port 1 :
                          Port Name: e1b-18
                                MTU: 4096
                   Link Information: ACTIVE
        
        cluster1::*> ha interconnect status show -node node1-01
          (system ha interconnect status show)
        
                               Node: node1-01
                      Link 0 Status: up
                      Link 1 Status: up
                   Is Link 0 Active: true
                   Is Link 1 Active: true
                 IC RDMA Connection: up
                               Slot: 0
                     Debug Firmware: no
        
        
        Interconnect Port 0 :
                          Port Name: e1a-17
                                MTU: 4096
                   Link Information: ACTIVE
        
        
        Interconnect Port 1 :
                          Port Name: e1b-18
                                MTU: 4096
                   Link Information: ACTIVE
        .
        .
        .
    3. ストレージポート

      1. すべてのストレージ ポートが正常な状態で稼働していることを確認します。

        storage port show -port-type ENET
        例を表示
        cluster1::*> storage port show -port-type ENET
        
        
                                              Speed
        Node               Port Type  Mode    (Gb/s) State    Status
        ------------------ ---- ----- ------- ------ -------- -----------
        node1-01
                           e10a ENET  -          100 enabled  online
                           e10b ENET  -          100 enabled  online
                           e11a ENET  -          100 enabled  online
                           e11b ENET  -          100 enabled  online
        node1-02
                           e10a ENET  -          100 enabled  online
                           e10b ENET  -          100 enabled  online
                           e11a ENET  -          100 enabled  online
                           e11b ENET  -          100 enabled  online
        node1-03
                           e10a ENET  -          100 enabled  online
                           e10b ENET  -          100 enabled  online
                           e11a ENET  -          100 enabled  online
        node1-04
                           e10a ENET  -          100 enabled  online
                           e10b ENET  -          100 enabled  online
                           e11a ENET  -          100 enabled  online
                           e11b ENET  -          100 enabled  online
        16 entries were displayed.
    4. ストレージシェルフポート

      1. すべてのストレージ シェルフ ポートが正常な状態で稼働していることを確認します。

        storage shelf port show
        例を表示
        cluster1::*> storage shelf port show
        
        Shelf ID Module State        Internal?
        ----- -- ------ ------------ ---------
        1.1
               0 A      connected    false
               1 A      connected    false
               2 A      connected    false
               3 A      connected    false
               4 A      connected    false
               5 A      connected    false
               6 A      connected    false
               7 A      connected    false
               8 B      connected    false
               9 B      connected    false
              10 B      connected    false
              11 B      connected    false
              12 B      connected    false
              13 B      connected    false
              14 B      connected    false
              15 B      connected    false
        
        16 entries were displayed.
      2. すべてのストレージ シェルフ ポートが正常な状態で稼働していることを確認します。

        storage shelf port show -fields remote-device,remote-port,connector-state
        例を表示
        cluster1::*> storage shelf port show -fields remote-device,remote-port,connector-state
        
        shelf id connector-state remote-port    remote-device
        ----- -- --------------- -------------- -----------------
        1.1   0  connected       Ethernet1/17/1 CX9332D-cs1
        1.1   1  connected       Ethernet1/15/1 CX9364D-cs1
        1.1   2  connected       Ethernet1/17/2 CX9332D-cs1
        1.1   3  connected       Ethernet1/15/2 CX9364D-cs1
        1.1   4  connected       Ethernet1/17/3 CX9332D-cs1
        1.1   5  connected       Ethernet1/15/3 CX9364D-cs1
        1.1   6  connected       Ethernet1/17/4 CX9332D-cs1
        1.1   7  connected       Ethernet1/15/4 CX9364D-cs1
        1.1   8  connected       Ethernet1/19/1 CX9332D-cs1
        1.1   9  connected       Ethernet1/17/1 CX9364D-cs1
        1.1   10 connected       Ethernet1/19/2 CX9332D-cs1
        1.1   11 connected       Ethernet1/17/2 CX9364D-cs1
        1.1   12 connected       Ethernet1/19/3 CX9332D-cs1
        1.1   13 connected       Ethernet1/17/3 CX9364D-cs1
        1.1   14 connected       Ethernet1/19/4 CX9332D-cs1
        1.1   15 connected       Ethernet1/17/4 CX9364D-cs1
        
        16 entries were displayed.
  5. クラスタLIFの自動ロールバックを無効にします。クラスタLIFはパートナークラスタスイッチにフェイルオーバーし、対象スイッチでこの手順を実行する間、そのままの状態を維持します。

    network interface modify -vserver Cluster -lif * -auto-revert false

ステップ2:RCFをアップグレードする

RCF アップグレードには、スイッチ CLI と ONTAP CLI を使用します(以下の手順で示すとおり)。まず、最初のスイッチ(cs1)の RCF をアップグレードし、次に 2 番目のスイッチ(cs2)に対してこれらの手順を繰り返します。

  1. スイッチCLIを使用して、スイッチcs1上で、ノードのすべてのポートに接続されているポートをシャットダウンします。

    注意 ネットワーク接続の問題を避けるため、接続されている*すべて*のポートを必ずシャットダウンしてください。詳細については、ナレッジベースの記事"スイッチ OS のアップグレード中にクラスタ LIF を移行するとノードがクォーラム外になる"を参照してください。
    cs1# config
    cs1(config)# interface e1/1/1-4,e1/2/1-4,e1/3/1-4,e1/4/1-4,e1/5/1-4,e1/6/1-4,e1/7/1-4,e1/8/1-4
    cs1(config-if-range)# shutdown
    cs1(config)# interface e1/9/1-4,e1/10/1-4,e1/11/1-4,e1/12/1-4,e1/13/1-4,e1/14/1-4,e1/15/1-4,e1/16/1-4
    cs1(config-if-range)# shutdown
    cs1(config)# interface e1/17/1-4,e1/18/1-4,e1/19/1-4,e1/20/1-4,e1/21/1-4,e1/22/1-4,e1/23/1-4,e1/24/1-4
    cs1(config-if-range)# shutdown
    cs1(config)# interface e1/25/1-4,e1/26/1-4,e1/27/1-4,e1/28/1-4,e1/29/1-4,e1/30/1-4,e1/31/1-4,e1/32/1-4
    cs1(config-if-range)# shutdown
    cs1(config)# interface e1/33/1-4,e1/34/1-4,e1/35/1-4,e1/36/1-4,e1/37/1-4,e1/38/1-4,e1/39/1-4,e1/40/1-4
    cs1(config-if-range)# shutdown
    cs1(config)# interface e1/41/1-4,e1/42/1-4,e1/43/1-4,e1/44/1-4,e1/35/1-4,e1/46/1-4,e1/47/1-4,e1/48/1-4
    cs1(config-if-range)# shutdown
    cs1(config)# interface e1/49/1-4,e1/50/1-4,e1/51/1-4,e1/52/1-4,e1/53/1-4,e1/54/1-4,e1/55/1-4,e1/56/1-4
    cs1(config-if-range)# shutdown
    cs1(config)# interface e1/57/1-4,e1/58/1-4,e1/59/1-4,e1/60/1-4,e1/61/1-4,e1/62/1-4
    cs1(config-if-range)# shutdown
    cs1(config-if-range)# exit
    cs1(config)# exit
  2. ONTAP CLI を使用して、クラスタ LIF がスイッチ cs1 でホストされているポートにフェイルオーバーしたことを確認します。数秒かかる場合があります。

    network interface show -role cluster
    例を表示
    cluster1::*> network interface show -role cluster
                Logical           Status     Network            Current       Current Is
    Vserver     Interface         Admin/Oper Address/Mask       Node          Port    Home
    ----------- ----------------- ---------- ------------------ ------------- ------- ----
    Cluster
                node1-01_clus1    up/up      169.254.36.44/16   node1-01      e7a     true
                node1-01_clus2    up/up      169.254.7.5/16     node1-01      e7b     true
                node1-02_clus1    up/up      169.254.197.206/16 node1-02      e7a     true
                node1-02_clus2    up/up      169.254.195.186/16 node1-02      e7b     true
                node1-03_clus1    up/up      169.254.192.49/16  node1-03      e7a     true
                node1-03_clus2    up/up      169.254.182.76/16  node1-03      e7b     true
                node1-04_clus1    up/up      169.254.59.49/16   node1-04      e7a     true
                node1-04_clus2    up/up      169.254.62.244/16  node1-04      e7b     true
    8 entries were displayed.
  3. ONTAP CLI を使用して、クラスターが正常であることを確認します:

    cluster show
    例を表示
    cluster1::*> cluster show
    Node              Health  Eligibility   Epsilon
    ----------------- ------- ------------  -------
    node1-01          true    true          false
    node1-02          true    true          false
    node1-03          true    true          true
    node1-04          true    true          false
    4 entries were displayed.
  4. まだ実施していない場合は、スイッチの CLI を使用して、次のコマンドの出力をテキストファイルにコピーし、現在のスイッチ設定のコピーを保存してください:

    show running-config

    1. `show diff running-config`コマンドを使用して、bootflashに保存されているRCFファイルと比較します。それ以外の場合は、サードパーティ製の差分/比較ツールを使用してください。

  5. 基本的な設定の詳細を `write_erase.cfg`ブートフラッシュ上のファイル。

    メモ

    必ず以下を設定してください。

    • ユーザ名とパスワード

    • 管理IPアドレス

    • デフォルト ゲートウェイ

    • スイッチ名

    注意
    `write_erase.cfg`ファイルがすでに存在する場合は、次のように `write_erase_old.cfg`に名前を変更してください:

    cs1# move bootflash:write_erase.cfg write_erase_old.cfg

    cs1# show run | i "username admin password" > bootflash:write_erase.cfg

    cs1# show run | section "vrf context management" >> bootflash:write_erase.cfg

    cs1# show run | section "interface mgmt0" >> bootflash:write_erase.cfg

    cs1# show run | section "switchname" >> bootflash:write_erase.cfg

    cs1# echo "hardware access-list tcam region ing-racl 1024" >> bootflash:write_erase.cfg

    cs1# echo "hardware access-list tcam region egr-racl 1024" >> bootflash:write_erase.cfg

    cs1# echo "hardware access-list tcam region ing-l2-qos 1536" >> bootflash:write_erase.cfg

    詳細については、ナレッジベースの記事"リモート接続を維持しながらCiscoインターコネクトスイッチの設定をクリアする方法"を参照してください。

  6. スイッチのCLIを使用して、 `write_erase.cfg`ファイルが想定どおりに設定されていることを確認します:

    show file bootflash:write_erase.cfg

  7. スイッチのCLIを使用して、現在保存されている設定を消去します。

    write erase

    Warning: This command will erase the startup-configuration.

    Do you wish to proceed anyway? (y/n) [n] y

  8. スイッチの CLI を使用して、以前に保存した基本設定をスタートアップ設定にコピーします:

    copy bootflash:write_erase.cfg startup-config

  9. スイッチのCLIを使用して、スイッチを再起動します。

    reload

    This command will reboot the system. (y/n)? [n] y

  10. 管理 IP アドレスに再度アクセスできるようになったら、SSH 経由でスイッチにログインします。

    SSH キーに関連するホスト ファイル エントリを更新する必要がある場合があります。

  11. スイッチの CLI を使用して、FTP、TFTP、SFTP、または SCP のいずれかの転送プロトコルを使用して、RCF をスイッチ cs1 の bootflash にコピーします。

    Ciscoコマンドの詳細については、"Cisco Nexus 9000 シリーズ NX-OS コマンド リファレンス"の適切なガイドを参照してください。

    copy <protocol>: bootflash: vrf management

    例を表示

    この例では、TFTPを使用してスイッチcs1のブートフラッシュにRCFをコピーしています。

    cs1# copy tftp: bootflash: vrf management
    Enter source filename: NX9364D-GX2A-RCF-v10.0-Shared.txt
    Enter hostname for the tftp server: 172.22.201.50
    Trying to connect to tftp server......Connection to Server Established.
    TFTP get operation was successful
    Copy complete, now saving to disk (please wait)...
  12. スイッチのCLIを使用して、以前にダウンロードしたRCFをブートフラッシュに適用します。

    Ciscoコマンドの詳細については、"Cisco Nexus 9000 シリーズ NX-OS コマンド リファレンス"の適切なガイドを参照してください。

    この例ではRCFファイルを示します `NX9364D-GX2A-RCF-v10.0-Shared.txt`スイッチ cs1 にインストールされます:

    cs1# copy NX9364D-GX2A-RCF-v10.0-Shared.txt running-config echo-commands
    注意

    RCFの「インストールに関する注意事項」、「重要な注意事項」、および「バナー」の各セクションを必ずよくお読みください。

    スイッチが正しく動作するように設定するためには、出力を確認し、その指示に従う必要があります。

  13. スイッチ CLI を使用して、RCF ファイルが正しい新しいバージョンであることを確認します。

    show running-config

    次の情報が正しいことを確認してください。

    • RCFのバナー

    • ノードとポートの設定

    • カスタマイズ

      出力内容はサイトの構成によって異なります。ポートの設定を確認し、インストールしたRCFに固有の変更がないかリリース ノートを参照してください。

  14. 以前のカスタマイズをスイッチ構成に再適用します。

    スイッチが RCF 10.1 以降を実行している場合は、必要に応じて"ポート速度設定を変更する"できます。

  15. スイッチのCLIを使用して、RCFのバージョン、カスタム追加機能、およびスイッチの設定が正しいことを確認した後、running-configファイルをstartup-configファイルにコピーします。

    Ciscoコマンドの詳細については、"Cisco Nexus 9000 シリーズ NX-OS コマンド リファレンス"の適切なガイドを参照してください。

    copy running-config startup-config

    [] 100% Copy complete

  16. スイッチのCLIを使用して、スイッチcs1を再起動します。スイッチの再起動中は、ノード上で報告される「cluster switch health monitor」アラートや「cluster ports down」イベントは無視して構いません。

    reload

    This command will reboot the system. (y/n)? [n] y

  17. ONTAP CLI を使用して、クラスター上のすべてのポートの健全性を確認します。

    1. クラスターポート

      1. クラスター内のすべてのノードでクラスター ポートが稼働しており正常であることを確認します。

        network port show -ipspace Cluster
        例を表示
        cluster1::*> network port show -ipspace Cluster
        
        Node: node1-01
                                                                               Ignore
                                                          Speed(Mbps) Health   Health
        Port      IPspace      Broadcast Domain Link MTU  Admin/Oper  Status   Status
        --------- ------------ ---------------- ---- ---- ----------- -------- ------
        e7a       Cluster      Cluster          up   9000  auto/10000 healthy  false
        e7b       Cluster      Cluster          up   9000  auto/10000 healthy  false
        
        Node: node1-02
                                                                               Ignore
                                                          Speed(Mbps) Health   Health
        Port      IPspace      Broadcast Domain Link MTU  Admin/Oper  Status   Status
        --------- ------------ ---------------- ---- ---- ----------- -------- ------
        e7a       Cluster      Cluster          up   9000  auto/10000 healthy  false
        e7b       Cluster      Cluster          up   9000  auto/10000 healthy  false
        
        Node: node1-03
                                                                               Ignore
                                                          Speed(Mbps) Health   Health
        Port      IPspace      Broadcast Domain Link MTU  Admin/Oper  Status   Status
        --------- ------------ ---------------- ---- ---- ----------- -------- ------
        e7a       Cluster      Cluster          up   9000  auto/100000 healthy false
        e7b       Cluster      Cluster          up   9000  auto/100000 healthy false
        
        Node: node1-04
                                                                               Ignore
                                                          Speed(Mbps) Health   Health
        Port      IPspace      Broadcast Domain Link MTU  Admin/Oper  Status   Status
        --------- ------------ ---------------- ---- ---- ----------- -------- ------
        e7a       Cluster      Cluster          up   9000  auto/100000 healthy false
        e7b       Cluster      Cluster          up   9000  auto/100000 healthy false
        8 entries were displayed.
      2. クラスターからスイッチの健全性を確認します。

        network device-discovery show -protocol cdp
        system cluster-switch show -is-monitoring-enabled-operational true
        例を表示
        cluster1::*> network device-discovery show -protocol cdp
        Node/       Local  Discovered
        Protocol    Port   Device (LLDP: ChassisID)  Interface         Platform
        ----------- ------ ------------------------- ----------------- --------
        node1-01/cdp
                    e10a   cs1(FLMXXXXXXXX)          Ethernet1/16/3    N9K-C9364D-GX2A
                    e10b   cs2(FDOXXXXXXXX)          Ethernet1/13/3    N9K-C9364D-GX2A
                    e11a   cs1(FLMXXXXXXXX)          Ethernet1/16/4    N9K-C9364D-GX2A
                    e11b   cs2(FDOXXXXXXXX)          Ethernet1/13/4    N9K-C9364D-GX2A
                    e1a    cs1(FLMXXXXXXXX)          Ethernet1/16/1    N9K-C9364D-GX2A
                    e1b    cs2(FLMXXXXXXXX)          Ethernet1/13/1    N9K-C9364D-GX2A
                    .
                    .
                    .
                    e7a    cs1(FLMXXXXXXXX)          Ethernet1/16/2    N9K-C9364D-GX2A
                    e7b    cs2(FDOXXXXXXXX)          Ethernet1/13/2    N9K-C9364D-GX2A
        node1-02/cdp
        .
        .
        .
        
        cluster1::*> system cluster-switch show -is-monitoring-enabled-operational true
        Switch                      Type               Address          Model
        --------------------------- ------------------ ---------------- -----
        cs2(FDOXXXXXXXX)            cluster-network    10.228.137.233   N9K-C9364D-GX2A
             Serial Number: FDOXXXXXXXX
              Is Monitored: true
                    Reason: None
          Software Version: Cisco Nexus Operating System (NX-OS) Software, Version
                            10.4(2)
            Version Source: CDP/ISDP
        
        cs1(FLMXXXXXXXX)            cluster-network    10.228.137.234   N9K-C9364D-GX2A
             Serial Number: FLMXXXXXXXX
              Is Monitored: true
                    Reason: None
          Software Version: Cisco Nexus Operating System (NX-OS) Software, Version
                            10.4(2)
            Version Source: CDP/ISDP
        
        2 entries were displayed.
    2. HAポート

      1. すべての HA ポートが正常な状態で稼働していることを確認します。

        ha interconnect status show -node <node-name>
        例を表示
        cluster1::*> ha interconnect status show -node node1-01
          (system ha interconnect status show)
        
                               Node: node1-01
                      Link 0 Status: up
                      Link 1 Status: up
                   Is Link 0 Active: true
                   Is Link 1 Active: true
                 IC RDMA Connection: up
                               Slot: 0
                     Debug Firmware: no
        
        
        Interconnect Port 0 :
                          Port Name: e1a-17
                                MTU: 4096
                   Link Information: ACTIVE
        
        
        Interconnect Port 1 :
                          Port Name: e1b-18
                                MTU: 4096
                   Link Information: ACTIVE
        
        cluster1::*> ha interconnect status show -node node1-02
          (system ha interconnect status show)
        
                               Node: node1-02
                      Link 0 Status: up
                      Link 1 Status: up
                   Is Link 0 Active: true
                   Is Link 1 Active: true
                 IC RDMA Connection: up
                               Slot: 0
                     Debug Firmware: no
        
        
        Interconnect Port 0 :
                          Port Name: e1a-17
                                MTU: 4096
                   Link Information: ACTIVE
        
        
        Interconnect Port 1 :
                          Port Name: e1b-18
                                MTU: 4096
                   Link Information: ACTIVE
        .
        .
        .
    3. ストレージポート

      1. すべてのストレージ ポートが正常な状態で稼働していることを確認します。

        storage port show -port-type ENET
        例を表示
        cluster1::*> storage port show -port-type ENET
        
        
                                              Speed
        Node               Port Type  Mode    (Gb/s) State    Status
        ------------------ ---- ----- ------- ------ -------- -----------
        node1-01
                           e10a ENET  -          100 enabled  online
                           e10b ENET  -          100 enabled  online
                           e11a ENET  -          100 enabled  online
                           e11b ENET  -          100 enabled  online
        node1-02
                           e10a ENET  -          100 enabled  online
                           e10b ENET  -          100 enabled  online
                           e11a ENET  -          100 enabled  online
                           e11b ENET  -          100 enabled  online
        node1-03
                           e10a ENET  -          100 enabled  online
                           e10b ENET  -          100 enabled  online
                           e11a ENET  -          100 enabled  online
        node1-04
                           e10a ENET  -          100 enabled  online
                           e10b ENET  -          100 enabled  online
                           e11a ENET  -          100 enabled  online
                           e11b ENET  -          100 enabled  online
        16 entries were displayed.
    4. ストレージシェルフポート

      1. すべてのストレージ シェルフ ポートが正常な状態で稼働していることを確認します。

        storage shelf port show
        例を表示
        cluster1::*> storage shelf port show
        
        Shelf ID Module State        Internal?
        ----- -- ------ ------------ ---------
        1.1
               0 A      connected    false
               1 A      connected    false
               2 A      connected    false
               3 A      connected    false
               4 A      connected    false
               5 A      connected    false
               6 A      connected    false
               7 A      connected    false
               8 B      connected    false
               9 B      connected    false
              10 B      connected    false
              11 B      connected    false
              12 B      connected    false
              13 B      connected    false
              14 B      connected    false
              15 B      connected    false
        
        16 entries were displayed.
      2. すべてのストレージ シェルフ ポートの接続ステータスを確認します。

        storage shelf port show -fields remote-device,remote-port,connector-state
        例を表示
        cluster1::*> storage shelf port show -fields remote-device,remote-port,connector-state
        
        shelf id connector-state remote-port    remote-device
        ----- -- --------------- -------------- -----------------
        1.1   0  connected       Ethernet1/17/1 CX9332D-cs1
        1.1   1  connected       Ethernet1/15/1 CX9364D-cs1
        1.1   2  connected       Ethernet1/17/2 CX9332D-cs1
        1.1   3  connected       Ethernet1/15/2 CX9364D-cs1
        1.1   4  connected       Ethernet1/17/3 CX9332D-cs1
        1.1   5  connected       Ethernet1/15/3 CX9364D-cs1
        1.1   6  connected       Ethernet1/17/4 CX9332D-cs1
        1.1   7  connected       Ethernet1/15/4 CX9364D-cs1
        1.1   8  connected       Ethernet1/19/1 CX9332D-cs1
        1.1   9  connected       Ethernet1/17/1 CX9364D-cs1
        1.1   10 connected       Ethernet1/19/2 CX9332D-cs1
        1.1   11 connected       Ethernet1/17/2 CX9364D-cs1
        1.1   12 connected       Ethernet1/19/3 CX9332D-cs1
        1.1   13 connected       Ethernet1/17/3 CX9364D-cs1
        1.1   14 connected       Ethernet1/19/4 CX9332D-cs1
        1.1   15 connected       Ethernet1/17/4 CX9364D-cs1
        
        16 entries were displayed.
  18. ONTAP CLI を使用して、クラスターが正常であることを確認します:

    cluster show
    例を表示
    cluster1::*> cluster show
    Node              Health   Eligibility   Epsilon
    ----------------- -------- ------------- -------
    node1-01          true     true          false
    node1-02          true     true          false
    node1-03          true     true          true
    node1-04          true     true          false
    4 entries were displayed.
  19. スイッチ cs2 で手順 4 ~ 18 を繰り返します。

  20. ONTAP CLIを使用して、クラスタLIFの自動リバートを有効にします。

    network interface modify -vserver Cluster -lif * -auto-revert true

ステップ3: クラスターネットワーク構成とクラスターの健全性を確認する

両方のスイッチでRCFをアップグレードした後、クラスタネットワーク構成とクラスタの状態を確認してください。

  1. スイッチのCLIを使用して、クラスタポートに接続されているスイッチポートが*稼働中*であることを確認します。

    show interface brief

    例を表示
    cs1# show interface brief | grep up
    .
    .
    Eth1/9/3        1       eth  trunk  up      none                     100G(D) --
    Eth1/9/4        1       eth  trunk  up      none                     100G(D) --
    Eth1/15/1       1       eth  trunk  up      none                     100G(D) --
    Eth1/15/2       1       eth  trunk  up      none                     100G(D) --
    Eth1/15/3       1       eth  trunk  up      none                     100G(D) --
    Eth1/15/4       1       eth  trunk  up      none                     100G(D) --
    Eth1/16/1       1       eth  trunk  up      none                     100G(D) --
    Eth1/16/2       1       eth  trunk  up      none                     100G(D) --
    Eth1/16/3       1       eth  trunk  up      none                     100G(D) --
    Eth1/16/4       1       eth  trunk  up      none                     100G(D) --
    Eth1/17/1       1       eth  trunk  up      none                     100G(D) --
    Eth1/17/2       1       eth  trunk  up      none                     100G(D) --
    Eth1/17/3       1       eth  trunk  up      none                     100G(D) --
    Eth1/17/4       1       eth  trunk  up      none                     100G(D) --
    .
    .
    .
  2. スイッチのCLIを使用して、想定されるノードがまだ接続されていることを確認します。

    show cdp neighbors

    例を表示
    cs1# show cdp neighbors
    
    Capability Codes: R - Router, T - Trans-Bridge, B - Source-Route-Bridge
                      S - Switch, H - Host, I - IGMP, r - Repeater,
                      V - VoIP-Phone, D - Remotely-Managed-Device,
                      s - Supports-STP-Dispute
    
    Device-ID          Local Intrfce  Hldtme Capability  Platform      Port ID
    cs2(FDOXXXXXXXX)    Eth1/63        179    R S I s   N9K-C9332D-GX2B   Eth1/31
    cs2(FDOXXXXXXXX)    Eth1/64        179    R S I s   N9K-C9332D-GX2B   Eth1/32
    node1-01            Eth1/4/1       123    H         AFX-1K            e1a
    node1-01            Eth1/4/2       123    H         AFX-1K            e7a
    node1-01            Eth1/4/3       123    H         AFX-1K            e10a
    node1-01            Eth1/4/4       123    H         AFX-1K            e11a
    node1-02            Eth1/9/1       138    H         AFX-1K            e1a
    node1-02            Eth1/9/2       138    H         AFX-1K            e7a
    node1-02            Eth1/9/3       138    H         AFX-1K            e10a
    node1-02            Eth1/9/4       138    H         AFX-1K            e11a
    node1-03            Eth1/15/1      138    H         AFX-1K            e1a
    node1-03            Eth1/15/2      138    H         AFX-1K            e7a
    node1-03            Eth1/15/3      138    H         AFX-1K            e10a
    node1-03            Eth1/15/4      138    H         AFX-1K            e11a
    node1-04            Eth1/16/1      173    H         AFX-1K            e1a
    node1-04            Eth1/16/2      173    H         AFX-1K            e7a
    node1-04            Eth1/16/3      173    H         AFX-1K            e10a
    node1-04            Eth1/16/4      173    H         AFX-1K            e11a
    
    Total entries displayed: 18
  3. スイッチのCLIを使用して、以下のコマンドでクラスタノードが正しいクラスタVLANに属していることを確認します。

    show vlan brief

    show interface trunk

    例を表示
    cs1# show vlan brief
    
    VLAN Name                             Status    Ports
    ---- -------------------------------- --------- -------------------------------
    1    default                          active    Po1, Po999, Eth1/63, Eth1/64
                                                    Eth1/65, Eth1/66, Eth1/1/1
                                                    Eth1/1/2, Eth1/1/3, Eth1/1/4
    .
    .
    .
                                                    Eth1/61/2, Eth1/61/3, Eth1/61/4
                                                    Eth1/62/1, Eth1/62/2, Eth1/62/3
                                                    Eth1/62/4
    17   VLAN0017                         active    Eth1/1/1, Eth1/1/2, Eth1/1/3
                                                    Eth1/1/4, Eth1/2/1, Eth1/2/2
    .
    .
    .
                                                    Eth1/61/1, Eth1/61/2, Eth1/61/3
                                                    Eth1/61/4, Eth1/62/1, Eth1/62/2
                                                    Eth1/62/3, Eth1/62/4
    18   VLAN0018                         active    Eth1/1/1, Eth1/1/2, Eth1/1/3
                                                    Eth1/1/4, Eth1/2/1, Eth1/2/2
    .
    .
    .
                                                    Eth1/61/1, Eth1/61/2, Eth1/61/3
                                                    Eth1/61/4, Eth1/62/1, Eth1/62/2
                                                    Eth1/62/3, Eth1/62/4
    30   VLAN0030                         active    Eth1/1/1, Eth1/1/2, Eth1/1/3
                                                    Eth1/1/4, Eth1/2/1, Eth1/2/2
    .
    .
    .
                                                    Eth1/61/1, Eth1/61/2, Eth1/61/3
                                                    Eth1/61/4, Eth1/62/1, Eth1/62/2
                                                    Eth1/62/3, Eth1/62/4
    40   VLAN0040                         active    Eth1/1/1, Eth1/1/2, Eth1/1/3
                                                    Eth1/1/4, Eth1/2/1, Eth1/2/2
    .
    .
    .
                                                    Eth1/61/1, Eth1/61/2, Eth1/61/3
                                                    Eth1/61/4, Eth1/62/1, Eth1/62/2
                                                    Eth1/62/3, Eth1/62/4
    
    cs1# show interface trunk
    
    -----------------------------------------------------
    Port          Native  Status        Port
                  Vlan                  Channel
    -----------------------------------------------------
    Eth1/1/1      1       trunking      --
    Eth1/1/2      1       trunking      --
    Eth1/1/3      1       trunking      --
    Eth1/1/4      1       trunking      --
    Eth1/2/1      1       trunking      --
    Eth1/2/2      1       trunking      --
    Eth1/2/3      1       trunking      --
    Eth1/2/4      1       trunking      --
    .
    .
    .
    Eth1/62/2     none
    Eth1/62/3     none
    Eth1/62/4     none
    Eth1/63       none
    Eth1/64       none
    Po1           1
    メモ 特定のポートと VLAN の使用法の詳細については、RCF のバナーと重要な注意事項のセクションを参照してください。
  4. スイッチのCLIを使用して、cs1とcs2間のISLが正常に機能していることを確認します。

    show port-channel summary

    例を表示
    cs1# show port-channel summary
    Flags:  D - Down        P - Up in port-channel (members)
            I - Individual  H - Hot-standby (LACP only)
            s - Suspended   r - Module-removed
            b - BFD Session Wait
            S - Switched    R - Routed
            U - Up (port-channel)
            p - Up in delay-lacp mode (member)
            M - Not in use. Min-links not met
    --------------------------------------------------------------------------------
    Group Port-       Type     Protocol  Member Ports      Channel
    --------------------------------------------------------------------------------
    1     Po1(SU)     Eth      LACP      Eth1/63(P)   Eth1/64(P)
    999   Po999(SD)   Eth      NONE      --
    cs1#
  5. ONTAP CLIを使用して、クラスタLIFがホームポートに戻っていることを確認します。

    network interface show -role cluster
    例を表示
    cluster1::*> network interface show -role cluster
                Logical            Status     Network            Current      Current Is
    Vserver     Interface          Admin/Oper Address/Mask       Node         Port    Home
    ----------- ------------------ ---------- ------------------ ------------ ------- ----
    Cluster
                node1-01_clus1     up/up      169.254.36.44/16   node1-01     e7a     true
                node1-01_clus2     up/up      169.254.7.5/16     node1-01     e7b     true
                node1-02_clus1     up/up      169.254.197.206/16 node1-02     e7a     true
                node1-02_clus2     up/up      169.254.195.186/16 node1-02     e7b     true
                node1-03_clus1     up/up      169.254.192.49/16  node1-03     e7a     true
                node1-03_clus2     up/up      169.254.182.76/16  node1-03     e7b     true
                node1-04_clus1     up/up      169.254.59.49/16   node1-04     e7a     true
                node1-04_clus2     up/up      169.254.62.244/16  node1-04     e7b     true
    
    8 entries were displayed.

    クラスタ LIF がホーム ポートに戻っていない場合は、ローカル ノードから手動で元に戻します。

    network interface revert -vserver vserver_name -lif <lif-name>
  6. ONTAP CLI を使用して、クラスターが正常であることを確認します:

    cluster show
    例を表示
    cluster1::*> cluster show
    Node              Health  Eligibility   Epsilon
    ----------------- ------- ------------- -------
    node1-01          true    true          false
    node1-02          true    true          false
    node1-03          true    true          true
    node1-04          true    true          false
    
    4 entries were displayed.
  7. ONTAP CLI を使用して、リモートクラスタインターフェースの接続性を確認します。

    • クラスタ接続のアクセシビリティチェックの詳細を表示するには、次のコマンドを使用します。

      network interface check cluster-connectivity show
      例を表示
      cluster1::*> network interface check cluster-connectivity show
      
                                        Source           Destination     Packet
      Node   Date                       LIF              LIF             Loss
      ------ -------------------------- ---------------- --------------- -----------
      node1-01
             6/4/2025 03:13:33 -04:00   node1-01_clus2  node1-02_clus1   none
             6/4/2025 03:13:34 -04:00   node1-01_clus2  node1-02_clus1   none
      
      
      node1-02
             6/4/2025 03:13:33 -04:00   node1-02_clus2  node1-01_clus1   none
             6/4/2025 03:13:34 -04:00   node1-02_clus2  node1-01_clus2   none
      .
      .
      .
    • または、以下のコマンドを使用して接続状況を確認することもできます。

      cluster ping-cluster -node <node-name>
      例を表示
      cluster1::*> cluster ping-cluster -node local
      Host is node1-04
      Getting addresses from network interface table...
      Cluster node1-01_clus1 169.254.36.44 node1-01 e7a
      Cluster node1-01_clus2 169.254.7.5   node1-01 e7b
      Cluster node1-02_clus1 169.254.197.206 node1-02 e7a
      Cluster node1-02_clus2 169.254.195.186 node1-02 e7b
      Cluster node1-03_clus1 169.254.192.49 node1-03 e7a
      Cluster node1-03_clus2 169.254.182.76 node1-03 e7b
      Cluster node1-04_clus1 169.254.59.49 node1-04 e7a
      Cluster node1-04_clus2 169.254.62.244 node1-04 e7b
      Local = 169.254.59.49 169.254.62.244
      Remote = 169.254.36.44 169.254.7.5 169.254.197.206 169.254.195.186 169.254.192.49 169.254.182.76
      Cluster Vserver Id = 4294967293
      Ping status:
      ............
      Basic connectivity succeeds on 12 path(s)
      Basic connectivity fails on 0 path(s)
      ................................................
      Detected 9000 byte MTU on 12 path(s):
          Local 169.254.59.49 to Remote 169.254.182.76
          Local 169.254.59.49 to Remote 169.254.192.49
          Local 169.254.59.49 to Remote 169.254.195.186
          Local 169.254.59.49 to Remote 169.254.197.206
          Local 169.254.59.49 to Remote 169.254.36.44
          Local 169.254.59.49 to Remote 169.254.7.5
          Local 169.254.62.244 to Remote 169.254.182.76
          Local 169.254.62.244 to Remote 169.254.192.49
          Local 169.254.62.244 to Remote 169.254.195.186
          Local 169.254.62.244 to Remote 169.254.197.206
          Local 169.254.62.244 to Remote 169.254.36.44
          Local 169.254.62.244 to Remote 169.254.7.5
      Larger than PMTU communication succeeds on 12 path(s)
      RPC status:
      6 paths up, 0 paths down (tcp check)
      6 paths up, 0 paths down (udp check)
次の手順

スイッチの RCF をアップグレードしたら、"ログ収集のためにSSHを確認する"