Novità di AI Data Engine
Suggerisci modifiche
PDF
AI Data Engine (AIDE) 9.18.1 è la versione iniziale della piattaforma di NetApp per la gestione dei dati AI. Questa versione introduce un motore di metadati e flussi di lavoro di gestione che consentono alle organizzazioni di catalogare e organizzare dati non strutturati per carichi di lavoro AI, fornendo le basi per funzionalità avanzate di governance e vettorializzazione. La governance avanzata (guardrails) e la vettorializzazione sono disponibili per i clienti che dispongono delle licenze AI Data Engine appropriate.
Novità nella versione iniziale di AIDE 9.18.1
AIDE 9.18.1 introduce le seguenti funzionalità fondamentali:
La versione iniziale include un Metadata Engine che cataloga file e oggetti nei cluster ONTAP.
Le caratteristiche principali includono:
-
Estrazione automatizzata di metadati (attributi principali ed estesi, tag di oggetti) da volumi ONTAP locali e remoti su cluster peered.
-
API REST centralizzate per query e filtraggio per applicazioni che richiedono una vista globale dei dati aziendali.
-
Archiviazione scalabile dei metadati.
-
Estrazione automatica dei metadati attivata durante la creazione dell'area di lavoro.
Gli spazi di lavoro forniscono un raggruppamento logico delle fonti di dati (volumi) per i progetti AI.
La versione iniziale supporta:
-
Creazione di spazi di lavoro che si estendono su volumi ONTAP locali e remoti (utilizzando il peering dei cluster).
-
Assegnazione dei controlli di accesso agli spazi di lavoro, supportando ambienti multiutente e multi-tenant.
-
Estrazione automatica dei metadati e popolamento del catalogo al momento della creazione dell'area di lavoro.
Data Sync mantiene aggiornati i cataloghi di metadati e le raccolte di dati man mano che i dati di origine cambiano, senza alcun intervento manuale.
Le caratteristiche principali includono:
-
Sincronizzazione automatica dei dati da cluster ONTAP remoti o locali utilizzando la replica SnapMirror basata su policy.
-
Aggiornamenti incrementali che propagano solo i dati modificati, riducendo l'overhead.
-
Intervalli di aggiornamento configurabili per workspace.
-
Monitoraggio a livello di workspace dello stato e dell'attività di sincronizzazione.
La versione iniziale include i seguenti flussi di lavoro:
-
Rilevamento e aggiunta di nodi di elaborazione dati (DCN) durante la configurazione del cluster.
-
Creazione di VM di storage dedicate ai metadati per il Metadata Engine.
-
Configurazione delle interfacce del servizio Data Engine per l'accesso ai metadati a livello di cluster.
-
Peering con altri cluster ONTAP per estendere la catalogazione dei metadati nell'intero patrimonio di dati.
-
Autenticazione basata su OIDC/OAuth per l'accesso sicuro a ONTAP System Manager e Data Engine Console con Microsoft Entra ID e Active Directory Federation Services (ADFS).
-
Controlli di accesso basati sui ruoli per la gestione dell'area di lavoro e dei metadati.
Le seguenti funzionalità sono disponibili per i clienti che dispongono delle licenze AI Data Engine appropriate:
-
Vettorizzazione e RAG: creazione di raccolte di dati, embedding ed endpoint di recupero nella AI Data Engine Console, utilizzando metadati dagli spazi di lavoro AIDE.
-
Governance basata su guardrail: definizione di guardrail policy nella AI Data Engine Console e associazione di tali policy con i workspace in ONTAP System Manager.
Hardware e piattaforme supportati
AI Data Engine 9.18.1 viene eseguito su cluster ONTAP AI data platform che combinano:
-
Nodi di storage AFX 1K
-
Nodi di calcolo dati NetApp