Skip to main content
AI Data Engine
Se proporciona el idioma español mediante traducción automática para su comodidad. En caso de alguna inconsistencia, el inglés precede al español.

Arquitectura de AI Data Engine

Colaboradores netapp-dbagwell
PDF

AI Data Engine (AIDE) se compone de Metadata Engine y un marco de políticas. Estas funciones trabajan juntas para extraer metadatos de tus sistemas de almacenamiento, catalogarlos en un índice con capacidad de búsqueda y permitirte definir consultas guardadas para identificar y actuar sobre los archivos que cumplan criterios específicos.

Componentes

Interactúas principalmente con AI Data Engine a través de cuatro áreas funcionales: el panel de control, la investigación, las políticas y la configuración. Estas áreas funcionales se basan en los siguientes componentes subyacentes.

Metadata Engine

Metadata Engine es la función principal de AI Data Engine. Analiza los sistemas de almacenamiento conectados para extraer los metadatos del sistema de archivos y almacena esos metadatos en un catálogo con función de búsqueda. Metadata Engine actualiza el catálogo en cada ciclo de análisis, detectando incorporaciones, cambios y eliminaciones en todos tus sistemas de almacenamiento.

NetApp Console Agent

AI Data Engine requiere un Console Agent de NetApp implementado en tu entorno. El Console Agent es un componente de la plataforma NetApp de uso general que mantiene la conectividad entre tu entorno local y NetApp Console. Gestiona la autenticación y la comunicación entre tu sitio y el servicio AIDE.

Nota El Console Agent no es específico de AI Data Engine. Si ya tienes un Console Agent implementado para otros servicios de NetApp, puedes usar el mismo agente. Para obtener instrucciones sobre la implementación del Console Agent, consulta "Documentación de NetApp Console Agent".

Modelos de implementación

AI Data Engine admite dos modelos de implementación:

AIDE Lite

Una implementación con una sola máquina virtual adecuada para entornos más pequeños. Disponible en configuraciones Small, Medium y Large en función del número de archivos que se vayan a catalogar.

AIDE Enterprise

Una implementación de clúster multinodo basada en Kubernetes para entornos más grandes que requieren alta disponibilidad.

AIDE Enterprise pasa de una configuración de tres nodos compatible con hasta aproximadamente mil millones de archivos y 250 millones de archivos al día a una configuración de nueve nodos compatible con hasta aproximadamente seis mil millones de archivos y dos mil millones de archivos al día. Consulta "Requisitos AIDE" para ver los detalles del dimensionamiento de nodos. Los nodos adicionales pueden ampliar la capacidad más allá de los seis mil millones de archivos. Consulta "directrices flexibles de dimensionamiento" para ver los detalles del escalado horizontal.

"Más información sobre las opciones de implementación".

Flujo de datos

  1. AI Data Engine se implementa en tu entorno local.

  2. Añades los sistemas de almacenamiento que quieres que AIDE catalogue en Configuración > Sistemas. Los sistemas compatibles incluyen NetApp ONTAP, StorageGRID, sistemas de bases de datos y cualquier sistema NAS o de almacenamiento de objetos que exponga los protocolos NFS, SMB/CIFS o S3.

  3. Metadata Engine monta recursos compartidos mediante los protocolos NFS y SMB/CIFS y analiza los sistemas de archivos para extraer los metadatos de los archivos.

  4. Los metadatos se indexan en el catálogo.

  5. El panel de control muestra información sobre el almacenamiento extraída del catálogo.

  6. La función «Investigación» te permite consultar el catálogo directamente con filtros de metadatos.

  7. Puedes guardar los criterios de búsqueda como políticas y volver a ejecutarlas para identificar los archivos coincidentes y actuar sobre ellos.

Nota Una vez que Metadata Engine termina de analizar todos los volúmenes configurados, inicia inmediatamente una nueva ronda de análisis, en la que vuelve a analizar los sistemas de archivos para detectar adiciones, cambios y eliminaciones.