Cosa sono gli schemi di codifica di cancellazione?
Suggerisci modifiche
PDF
Gli schemi di codifica di cancellazione controllano quanti frammenti di dati e quanti frammenti di parità vengono creati per ciascun oggetto.
Quando si crea o si modifica una regola ILM, si seleziona uno schema di codifica di cancellazione disponibile. StorageGRID crea automaticamente schemi di codifica di cancellazione in base al numero di nodi di archiviazione e siti che compongono il pool di archiviazione che si intende utilizzare.
Protezione dei dati
Il sistema StorageGRID utilizza l'algoritmo di codifica della cancellazione Reed-Solomon. L'algoritmo divide un oggetto in k frammenti di dati e calcoli m frammenti di parità.
IL k + m = n i frammenti sono sparsi n Nodi di archiviazione per garantire la protezione dei dati come segue:
-
Per recuperare o riparare un oggetto,
ksono necessari frammenti. -
Un oggetto può sostenere fino a
mframmenti persi o corrotti. Più alto è il valore dim, maggiore è la tolleranza al guasto.
La migliore protezione dei dati è fornita dallo schema di codifica di cancellazione con la più alta tolleranza ai guasti del nodo o del volume all'interno di un pool di archiviazione.
Spese di archiviazione generali
Il sovraccarico di archiviazione di uno schema di codifica di cancellazione viene calcolato dividendo il numero di frammenti di parità(m ) dal numero di frammenti di dati(k ). È possibile utilizzare il sovraccarico di archiviazione per calcolare la quantità di spazio su disco richiesta da ciascun oggetto con codice di cancellazione:
disk space = object size + (object size * storage overhead)
Ad esempio, se si archivia un oggetto da 10 MB utilizzando lo schema 4+2 (che ha un overhead di archiviazione del 50%), l'oggetto consuma 15 MB di spazio di archiviazione della griglia. Se si memorizza lo stesso oggetto da 10 MB utilizzando lo schema 6+2 (che ha un overhead di archiviazione del 33%), l'oggetto consuma circa 13,3 MB.
Selezionare lo schema di codifica di cancellazione con il valore totale più basso di k+m che soddisfa le tue esigenze. Gli schemi di codifica di cancellazione con un numero inferiore di frammenti sono più efficienti dal punto di vista computazionale perché:
-
Vengono creati e distribuiti (o recuperati) meno frammenti per oggetto
-
Hanno prestazioni migliori perché la dimensione del frammento è maggiore
-
Possono richiedere che vengano aggiunti meno nodi in un"espansione quando è necessario più spazio di archiviazione"
Linee guida per i pool di stoccaggio
Quando si seleziona il pool di archiviazione da utilizzare per una regola che creerà una copia con codice di cancellazione, attenersi alle seguenti linee guida per i pool di archiviazione:
-
Il pool di archiviazione deve includere tre o più siti oppure esattamente un sito.
Non è possibile utilizzare la codifica di cancellazione se il pool di archiviazione include due siti. -
Non utilizzare un pool di archiviazione che includa il sito Tutti i siti.
-
Il pool di archiviazione dovrebbe includere almeno
k+m +1Nodi di archiviazione in grado di archiviare dati di oggetti.
Durante l'installazione, è possibile configurare i nodi di archiviazione in modo che contengano solo metadati degli oggetti e non dati degli oggetti. Per ulteriori informazioni, consultare "Tipi di nodi di archiviazione" . Il numero minimo di nodi di archiviazione richiesti è
k+m. Tuttavia, avere almeno un nodo di archiviazione aggiuntivo può aiutare a prevenire errori di acquisizione o arretrati ILM se un nodo di archiviazione necessario non è temporaneamente disponibile.
Schemi di codifica di cancellazione per pool di archiviazione contenenti tre o più siti
Nella tabella seguente vengono descritti gli schemi di codifica di cancellazione attualmente supportati da StorageGRID per i pool di archiviazione che includono tre o più siti. Tutti questi schemi garantiscono una protezione contro le perdite del sito. Anche se un sito può andare perso, l'oggetto sarà comunque accessibile.
Per gli schemi di codifica di cancellazione che forniscono protezione contro la perdita del sito, il numero consigliato di nodi di archiviazione nel pool di archiviazione supera k+m +1 perché ogni sito richiede un minimo di tre nodi di archiviazione.
| Schema di codifica di cancellazione (k+m) | Numero minimo di siti distribuiti | Numero consigliato di nodi di archiviazione in ogni sito | Numero totale consigliato di nodi di archiviazione | Protezione contro le perdite del sito? | Spese di archiviazione generali |
|---|---|---|---|---|---|
4+2 |
3 |
3 |
9 |
SÌ |
50% |
6+2 |
4 |
3 |
12 |
SÌ |
33% |
8+2 |
5 |
3 |
15 |
SÌ |
25% |
6+3 |
3 |
4 |
12 |
SÌ |
50% |
9+3 |
4 |
4 |
16 |
SÌ |
33% |
2+1 |
3 |
3 |
9 |
SÌ |
50% |
4+1 |
5 |
3 |
15 |
SÌ |
25% |
6+1 |
7 |
3 |
21 |
SÌ |
17% |
7+5 |
3 |
5 |
15 |
SÌ |
71% |
|
|
StorageGRID richiede un minimo di tre nodi di archiviazione per sito. Per utilizzare lo schema 7+5, ogni sito richiede un minimo di quattro nodi di archiviazione. Si consiglia di utilizzare cinque nodi di archiviazione per sito. |
Quando si seleziona uno schema di codifica di cancellazione che garantisca la protezione del sito, è necessario valutare l'importanza relativa dei seguenti fattori:
-
Numero di frammenti: le prestazioni e la flessibilità di espansione sono generalmente migliori quando il numero totale di frammenti è inferiore.
-
Tolleranza ai guasti: la tolleranza ai guasti aumenta avendo più segmenti di parità (ovvero, quando
mha un valore più alto.) -
Traffico di rete: durante il ripristino da guasti, utilizzando uno schema con più frammenti (ovvero, un totale più elevato per
k+m) crea più traffico di rete. -
Sovraccarico di archiviazione: gli schemi con sovraccarico più elevato richiedono più spazio di archiviazione per oggetto.
Ad esempio, quando si decide tra uno schema 4+2 e uno schema 6+3 (entrambi con un overhead di archiviazione del 50%), selezionare lo schema 6+3 se è richiesta una tolleranza agli errori aggiuntiva. Selezionare lo schema 4+2 se le risorse di rete sono limitate. Se tutti gli altri fattori sono uguali, seleziona 4+2 perché ha un numero totale di frammenti inferiore.
|
|
Se non sei sicuro di quale schema utilizzare, seleziona 4+2 o 6+3 oppure contatta l'assistenza tecnica. |
Schemi di codifica di cancellazione per pool di archiviazione monosito
Un pool di archiviazione con un solo sito supporta tutti gli schemi di codifica di cancellazione definiti per tre o più siti, a condizione che il sito disponga di un numero sufficiente di nodi di archiviazione.
Il numero minimo di nodi di archiviazione richiesti è k+m , ma un pool di archiviazione con k+m +1 Si consiglia l'uso di Storage Nodes. Ad esempio, lo schema di codifica di cancellazione 2+1 richiede un pool di archiviazione con un minimo di tre nodi di archiviazione, ma si consigliano quattro nodi di archiviazione.
| Schema di codifica di cancellazione (k+m) | Numero minimo di nodi di archiviazione | Numero consigliato di nodi di archiviazione | Spese di archiviazione generali |
|---|---|---|---|
4+2 |
6 |
7 |
50% |
6+2 |
8 |
9 |
33% |
8+2 |
10 |
11 |
25% |
6+3 |
9 |
10 |
50% |
9+3 |
12 |
13 |
33% |
2+1 |
3 |
4 |
50% |
4+1 |
5 |
6 |
25% |
6+1 |
7 |
8 |
17% |
7+5 |
12 |
13 |
71% |