NetApp AI Data Engineについて学ぶ
NetApp AI Data Engine(AIDE)は、AFXクラスタに接続されたデータコンピューティングノード上で実行される、ストレージ統合AIデータサービスです。オプションでAIDEをAFXクラスタにインストールして統合することで、ONTAPのすべてのメリットを維持しながら、AIおよびMLワークロード向けの専用GPUアクセラレーションデータ処理を提供し、AFXを拡張できます。
AIDEの概要
AIDEは、AIおよびMLワークロードのデータの準備と管理を高速化および簡素化するように設計されたシステムです。これは個別にインストールされ、AFXストレージ システム クラスターと緊密に統合されます。AIDEは、ハイパフォーマンスでスケーラブルなAFXストレージ基盤を活用しながら、AIデータ処理、ガバナンス、ワークフロー自動化に特化したサービスを追加します。
AIDE のコアとなる強みは、大規模に分散されたデータセット全体のメタデータの管理を一元化および自動化する機能です。ONTAP ボリューム内のデータに基づいてメタデータ ストアを継続的にカタログ化して更新するように設定できるため、ユーザーはガバナンス ポリシーを効率的に検索、分類、適用できるようになります。内部処理パイプラインは、セマンティック検索および取得タスクに必要なベクトル埋め込みの作成を含む、AI 対応データセットを生成します。
セキュリティとガバナンスも設計の中心となります。AIDEは、認証、新しいRBACロールによるアクセス制御、データ分類、機密情報を保護するためのポリシーベースの適用を提供します。自動編集、マスキング、監査ログなどの機能は、適用される規制要件を満たし、AIライフサイクル全体を通じて重要なデータを保護するのに役立ちます。
AIDE は、迅速なデータ検出、キュレーション、ワークフロー管理のためのツールを提供することで、データ エンジニアとデータ サイエンティストを支援します。専用の AIDE コンソールと強化された AFX REST API により、ユーザーは、キュレーションされたデータ コレクションを作成し、ベクトル検索を実行し、外部の AI および GenAI アプリケーションと統合することができます。AIDE は、必要な手作業を削減し、チームがデータから洞察を抽出することに集中できるようにします。
インストール オプション
AIDE を AFX ストレージ クラスターにインストールして統合するには、2 つのオプションがあります。
AFXとAIDEを一緒にセットアップする
AFXストレージシステムとAIDEを同時に導入することで、統一され合理化されたインストール プロセスを提供し、即時の統合と最適な構成を保証します。このターンキーアプローチは、オンボーディングを簡素化し、互換性を保証し、完全に機能するAI データ プラットフォームを迅速に活用できるようにします。これは、価値実現までの時間を短縮したい新規導入に最適です。
既存のAFXクラスターとAIDEを統合する
すでにAFXストレージクラスタがインストールされ、運用されている場合は、AIDEをいつでも追加してデータへのアクセスと価値を高めることができます。AIDEは既存のAFXストレージ環境へのアドオンとして展開され、確立されたクラスタストレージ ネットワークに接続し、業務を中断することなく運用できます。統合プロセスは利用可能なONTAPボリュームを自動的に検出し、メタデータを同期します。データ処理ワークフローは、既存のストレージ基盤を維持しながら、AI自動化、ガバナンス、キュレーションツールによって強化されます。