ストレージボリュームへのオブジェクトデータのリストア

システムドライブにも障害が発生したストレージノードで、システムドライブとストレージボリュームの両方をリカバリしたら、他のストレージノードおよびアーカイブノードからリカバリしたストレージボリュームにオブジェクトデータをリストアすることができます。

開始する前に

repair-dataコマンドは、プライマリ管理ノードにログインしているときに実行する必要があります。
リストア先のストレージボリュームのボリュームIDを確認しておく必要があります。[Grid] > [Storage Node] > [LDR] > [Storage] > [Overview] > [Main]を選択します。
リカバリされたストレージノードがグリッドトポロジツリーで緑で表示され、かつすべてのサービスが「Online」と表示されていることを確認しておく必要があります。

タスク概要

障害が発生したストレージボリュームを正しくリカバリするためには、そのストレージボリュームのデバイス名とIDの両方を把握しておく必要があります。

インストール時に、各ストレージデバイスにはファイルシステムのUniversal Unique Identifier（UUID）が割り当てられ、そのUUIDを使用してストレージノードのrangedbディレクトリにマウントされます。ファイルシステムのUUIDとrangedbディレクトリは、/etc/fstabファイルに記載されています。デバイス名、rangedbディレクトリ、およびマウントされたボリュームのサイズは、StorageGRID Webscaleシステムの[Grid] > [site] > [failed Storage Node] > [SSM] > [Resources] > [Overview] > [Main]に表示されます。

次の例では、ボリュームサイズが4TBのデバイス/dev/sdbが/var/local/rangedb/0にマウントされており、/etc/fstabファイル内のデバイス名/dev/disk/by-uuid/822b0547-3b2b-472e-ad5e-e1cf1809fabaを使用しています。
ボリュームサイズの例

repair-dataスクリプトの使用

オブジェクトデータをリストアするには、repair-dataスクリプトを実行します。このスクリプトは、オブジェクトデータのリストアプロセスを開始し、ILMスキャンと連動してILMルールを適用します。repair-dataスクリプトの各オプションを使用して、オブジェクトレプリケーションで保護されたオブジェクトデータ、およびイレイジャーコーディングで保護されたデータをリストアします。

注:プライマリ管理ノードのコマンドラインで「repair-data --help」と入力すると、repair-dataスクリプトの使用方法の詳細を確認できます。

レプリケートデータ

レプリケートデータのリストアには、repair-data start-replicated-node-repairコマンドとrepair-data start-replicated-volume-repairコマンドを使用します。Cassandraに不整合が生じている可能性があり、かつ失敗した修復は追跡されませんが、レプリケートデータの修復のステータスはある程度監視できます。修復を監視し、レプリケートデータの修復が完了したかどうかを可能な限り判別するには、次の属性の組み合わせを使用します。

レプリケートデータの修復の進行状況を追跡するには、[Repairs Attempted (XRPA)]属性（[Summary Attribute]ページ > [ILM Activity]）を使用します。この属性は、LDRがハイリスクオブジェクトの修復を試みるたびに値が増えます。この属性の値が現在のスキャン期間（[Scan Period – Estimated]属性で確認可能）よりも長い期間増えないときは、修復を必要とするハイリスクオブジェクトがILMスキャンでどのノードにも見つからなかったことを意味します。
注:ハイリスクオブジェクトとは、完全に失われる危険があるオブジェクトです。ILM設定を満たしていないオブジェクトは含まれません。
以前に取り込まれたオブジェクトにポリシー変更が適用されるタイミングを推定するには、[Scan Period – Estimated (XSCM)]属性を使用します。[Repairs Attempted]属性の値が現在のスキャン期間よりも長い期間増えない場合は、レプリケートデータの修復が完了している可能性があります。スキャン期間は変わる可能性があるので注意してください。[Scan Period – Estimated (XSCM)]は、すべてのノードスキャン期間の最大値を示す概要レベルの属性です。[Scan Period – Estimated]属性の履歴を概要レベルで照会して、グリッドの適切な期間を特定することができます。

イレイジャーコーディング（EC）データ

イレイジャーコーディングデータのリストアには、repair-data start-ec-node-repairコマンドとrepair-data start-ec-volume-repairコマンドを使用します。イレイジャーコーディングデータの修復は、一部のストレージノードがオフライン状態で開始できます。修復はすべてのノードが使用可能になったあとに完了します。repair-data show-ec-repair-statusコマンドを使用すると、イレイジャーコーディングデータの修復を追跡できます。

データリカバリに関する注意事項

オブジェクトデータのコピーがアーカイブノードにしか残っていない場合は、アーカイブノードからオブジェクトデータが読み出されます。外部アーカイブストレージシステムからの読み出しには遅延が伴うため、アーカイブノードからストレージノードへのオブジェクトデータのリストアには、別のストレージノードからコピーをリストアする場合に比べて時間がかかります。

注:単一のコピーだけをレプリケートするようにILMポリシーが設定されている場合、これらのオブジェクトが失われるとリカバリすることはできません。その場合も、失われたオブジェクトの情報をデータベースからパージするために「ストレージボリュームへのオブジェクトデータのリストア」の手順を実行する必要があります。ILMポリシーの詳細については、『管理者ガイド』を参照してください。

手順

サービスラップトップから、プライマリ管理ノードにログインします。
1. 次のコマンドを入力します：ssh admin@primary_Admin_Node_IP
2. Passwords.txtファイルに含まれているパスワードを入力します。
3. 次のコマンドを入力してrootに切り替えます：su -
4. Passwords.txtファイルに含まれているパスワードを入力します。
  rootとしてログインすると、プロンプトが$から#に変わります。
/etc/hostsファイルを使用して、リストアされたストレージボリュームのストレージノードのホスト名を探します。グリッド内のすべてのノードのリストを表示するには、次のコマンドを入力します：cat /etc/hosts
すべてのストレージボリュームで障害が発生した場合は、repair-dataノード修復コマンドを使用してノード全体を修復します。
レプリケートデータとイレイジャーコーディングデータの両方がグリッドにある場合は、次の2つのコマンドを実行します。
- レプリケートデータ：repair-data start-replicated-node-repairコマンドに--nodesオプションを指定して、ストレージノード全体を修復します。
  次のコマンドでは、例としてノード名に「SG-DC-SN3」を使用しています。
  repair-data start-replicated-node-repair --nodes SG-DC-SN3
- イレイジャーコーディングデータ：repair-data start-ec-node-repairコマンドに--nodesオプションを指定して、ストレージノード全体を修復します。
  次のコマンドでは、例としてノード名に「SG-DC-SN3」を使用しています。
  repair-data start-ec-node-repair --nodes SG-DC-SN3
  このrepair_data処理に対する一意のrepair IDが返されます。このrepair IDを使用して、repair_data処理の進行状況と結果を追跡します。リカバリプロセスが完了するまでにこの他に返される情報はありません。
  
  注:イレイジャーコーディングデータの修復は、一部のストレージノードがオフライン状態で開始できます。修復はすべてのノードが使用可能になったあとに完了します。
注:複数のノードに対して同時にrepair-data処理を実行することはできません。複数のノードをリカバリする場合は、テクニカルサポートにお問い合わせください。

オブジェクトデータがリストアされる際に、StorageGRID Webscaleシステムがレプリケートオブジェクトデータを見つけられない場合は、LOST（オブジェクト損失）アラームがトリガーされます。システム全体のストレージノードに対してアラームがトリガーされることがあります。損失の原因およびリカバリが可能かどうかを特定する必要があります。詳細については、『トラブルシューティングガイド』を参照してください。
一部のボリュームにのみ障害が発生している場合は、repair-dataボリューム修復コマンドを使用して、1つまたは一連のボリュームを修復します。
ボリュームIDを16進形式で入力します。0000は最初のボリューム、000Fは16番目のボリュームです。1つまたは一連のボリュームを指定できます。

レプリケートデータとイレイジャーコーディングデータの両方がグリッドにある場合は、次の2つのコマンドを実行します。
- レプリケートデータ：start-replicated-volume-repairコマンドに--nodesオプションと--volume-rangeオプションを指定します。
  次のコマンドは、サンプルのノード名SG-DC-SN3を使用して、0003～000Bのすべてのボリュームにオブジェクトデータをリストアします。
  repair-data start-replicated-volume-repair --nodes SG-DC-SN3 --volume-range 0003,000B
  レプリケートデータの場合は、同じノードに対して複数のrepair-data処理を同時に実行できます。この方法は、連続しない2つのボリューム（0000と000Aなど）をリストアする必要がある場合に使用します。
- イレイジャーコーディングデータ：start-ec-volume-repairコマンドに--nodesオプションと--volume-rangeオプションを指定します。
  次のコマンドは、サンプルのノード名SG-DC-SN3を使用して、単一のボリューム000Aにデータをリストアします。
  repair-data start-ec-volume-repair --nodes SG-DC-SN3 --volume-range 000A
  イレイジャーコーディングデータの場合は、1つのrepair-data start ec-volume-repair処理が完了してから、同じノードに対して2回目のrepair-data処理を開始する必要があります。
  
  repair-data処理から、このrepair_data処理に対する一意のrepair IDが返されます。このrepair IDを使用して、repair_data処理の進行状況と結果を追跡します。リカバリプロセスが完了するまでにこの他に返される情報はありません。
  注:イレイジャーコーディングデータの修復は、一部のストレージノードがオフライン状態で開始できます。修復はすべてのノードが使用可能になったあとに完了します。
注:複数のノードに対して同時にrepair-data処理を実行することはできません。複数のノードをリカバリする場合は、テクニカルサポートにお問い合わせください。

オブジェクトデータがリストアされる際に、StorageGRID Webscaleシステムがレプリケートオブジェクトデータを見つけられない場合は、LOST（オブジェクト損失）アラームがトリガーされます。システム全体のストレージノードに対してアラームがトリガーされることがあります。損失の原因およびリカバリが可能かどうかを特定する必要があります。詳細については、『トラブルシューティングガイド』を参照してください。

イレイジャーコーディングデータの修復のステータスを追跡して、修復が正常に完了したことを確認します。次のいずれかの処理を選択します。

repair-data処理の現在のステータスまたは結果を確認するには、次のコマンドを使用します。 repair-data show-ec-repair-status --repair-id repair ID
指定したrepair IDのステータスが表示されます。

すべての修復処理を表示するには、次のコマンドを使用します。 repair-data show-ec-repair-status

出力には、以前に実行した修復と現在実行中の修復の情報（repair IDなど）が表示されます。

root@DC1-ADM1:~ # repair-data show-ec-repair-status                      

 Repair ID   Scope                   Start Time  End Time  State  Est Bytes Affected Bytes Repaired  Retry Repair
==========================================================================================================
 949283   DC1-S-99-10(Volumes: 1,2) 2016-11-30T15:27:06.9  Success   17359            17359           No
 949292   DC1-S-99-10(Volumes: 1,2) 2016-11-30T15:37:06.9  Failure   17359            0               Yes
 949294   DC1-S-99-10(Volumes: 1,2) 2016-11-30T15:47:06.9  Failure   17359            0               Yes
 949299   DC1-S-99-10(Volumes: 1,2) 2016-11-30T15:57:06.9  Failure   17359            0               Yes

失敗した修復処理が出力された場合は、--repair-idオプションを指定して失敗した修復を再試行します。
次のコマンドは障害が発生したノードでイレイジャーコーディングデータの修復を再試行します。repair IDは「83930030303133434」です。 repair-data start-ec-node-repair --repair-id 83930030303133434

次のコマンドは障害が発生したイレイジャーコーディングデータボリュームの修復を再試行します。repair IDは「83930030303133434」です。 repair-data start-ec-volume-repair --repair-id 83930030303133434

ストレージ ボリュームへのオブジェクト データのリストア

開始する前に

タスク概要

手順

ストレージボリュームへのオブジェクトデータのリストア