Novità di AI Data Engine
Suggerisci modifiche
PDF
Scopri le funzionalità più recenti disponibili nelle release di AI Data Engine (AIDE) per la gestione dei dati AI, inclusa la catalogazione dei metadati, la gestione degli spazi di lavoro e le opzioni di implementazione flessibili.
Novità di AIDE 1.0.0
AIDE 1.0.0 (rilasciato il 30 aprile 2026) introduce AIDE come distribuzione esclusivamente software su server di terze parti. Questa opzione di distribuzione consente di eseguire il software AIDE sui propri server RHEL 9.7 senza la necessità di NetApp Data Compute Nodes (DCN). In questa versione, il software AIDE su server di terze parti supporta funzionalità incentrate sui metadati.
L'opzione di distribuzione del software AIDE su server di terze parti offre la flessibilità di utilizzare il proprio hardware con le funzionalità di gestione dei metadati di AIDE, gestendo autonomamente l'hardware e il sistema operativo sottostanti. Le caratteristiche principali di questo modello di distribuzione includono:
-
Sono necessari cluster omogenei a tre nodi
-
Installi il sistema operativo e gestisci le patch di sicurezza del sistema operativo
-
NetApp fornisce lo stack software AIDE e il supporto
-
Richiede ONTAP 9.18.1 o versioni successive
-
Richiede un sistema storage ONTAP
Il software AIDE su server di terze parti supporta le funzionalità principali di Metadata Engine di AIDE, consentendo di catalogare e organizzare i metadati per i carichi di lavoro AI.
In questa versione, il software AIDE su server di terze parti non supporta servizi dipendenti dalla GPU come la vettorizzazione, l'OCR e l'arricchimento, né raccolte di dati, embedding vettoriali o endpoint RAG per la ricerca semantica. Un percorso di upgrade alle funzionalità complete di AIDE è supportato quando tali funzionalità diventano disponibili.
Il software AIDE installato su server di terze parti offre le seguenti funzionalità relative ai metadati:
-
Creazione e gestione degli spazi di lavoro
-
Estrazione e catalogazione automatizzata dei metadati
-
Ricerca e filtraggio dei metadati tramite API REST
-
Data Sync per la valuta automatizzata dei dati
-
funzionalità di esportazione dei metadati
In AIDE 1.0.0, la funzionalità Metadata Engine è disponibile in AI Data Engine Console. È possibile cercare, esplorare, filtrare ed esportare metadati da una visualizzazione centralizzata per tutti gli spazi di lavoro. È possibile esplorare i metadati da una nuova pagina in AIDE Console inclusa con tutto il software AIDE nelle distribuzioni su server di terze parti. Questa pagina può essere utilizzata dopo che la creazione dello spazio di lavoro e l’estrazione dei metadati sono state completate.
Novità della versione iniziale di AIDE 9.18.1U0/U1
AI Data Engine (AIDE) 9.18.1 U0/U1 è la versione iniziale della piattaforma NetApp per la gestione dei dati di AI. Questa versione introduce un Metadata Engine e flussi di lavoro di gestione che consentono alle organizzazioni di catalogare e organizzare dati non strutturat i per i carichi di lavoro di AI, fornendo le basi per funzionalità avanzate di governance e vettorizzazione. La governance avanzata (guardrails) e la vettorizzazione sono disponibili per i clienti che dispongono delle licenze AI Data Engine appropriate.
AIDE 9.18.1U0 introduce le seguenti funzionalità fondamentali:
La versione iniziale include un Metadata Engine che cataloga file e oggetti nei cluster ONTAP.
Le caratteristiche principali includono:
-
Estrazione automatizzata di metadati (attributi principali ed estesi, tag di oggetti) da volumi ONTAP locali e remoti su cluster peered.
-
API REST centralizzate per query e filtraggio per applicazioni che richiedono una vista globale dei dati aziendali.
-
Archiviazione scalabile dei metadati.
-
Estrazione automatica dei metadati attivata durante la creazione dell'area di lavoro.
Gli spazi di lavoro forniscono un raggruppamento logico delle fonti di dati (volumi) per i progetti AI.
La versione iniziale supporta:
-
Creazione di spazi di lavoro che si estendono su volumi ONTAP locali e remoti (utilizzando il peering dei cluster).
-
Assegnazione dei controlli di accesso agli spazi di lavoro, supportando ambienti multiutente e multi-tenant.
-
Estrazione automatica dei metadati e popolamento del catalogo al momento della creazione dell'area di lavoro.
Data Sync mantiene aggiornati i cataloghi di metadati e le raccolte di dati man mano che i dati di origine cambiano, senza alcun intervento manuale.
Le caratteristiche principali includono:
-
Sincronizzazione automatica dei dati da cluster ONTAP remoti o locali utilizzando la replica SnapMirror basata su policy.
-
Aggiornamenti incrementali che propagano solo i dati modificati, riducendo l'overhead.
-
Intervalli di aggiornamento configurabili per workspace.
-
Monitoraggio a livello di workspace dello stato e dell'attività di sincronizzazione.
La versione iniziale include i seguenti flussi di lavoro:
-
Rilevamento e aggiunta di nodi di elaborazione dati (DCN) durante la configurazione del cluster.
-
Creazione di VM di storage dedicate ai metadati per il Metadata Engine.
-
Configurazione delle interfacce del servizio Data Engine per l'accesso ai metadati a livello di cluster.
-
Peering con altri cluster ONTAP per estendere la catalogazione dei metadati nell'intero patrimonio di dati.
-
Autenticazione basata su OIDC/OAuth per l'accesso sicuro a ONTAP System Manager e Data Engine Console con Microsoft Entra ID e Active Directory Federation Services (ADFS).
-
Controlli di accesso basati sui ruoli per la gestione dell'area di lavoro e dei metadati.
Le seguenti funzionalità sono disponibili con l'aggiornamento AIDE 9.18.1U1 per i clienti in possesso delle licenze AIDE appropriate:
-
Vettorizzazione e RAG: Creazione di raccolte di dati, embedding ed endpoint di recupero nella AI Data Engine Console, utilizzando i metadati dagli spazi di lavoro di AIDE.
-
Governance basata su guardrail: Definizione delle policy di guardrail in AI Data Engine Console e associazione di tali policy con gli spazi di lavoro in ONTAP System Manager.
Hardware e piattaforme supportati
AIDE 9.18.1 U0 e U1 vengono eseguiti su cluster della piattaforma dati ONTAP AI che combinano:
-
Nodi di storage AFX 1K
-
Nodi di calcolo dati NetApp