Skip to main content
NetApp Solutions
Die deutsche Sprachversion wurde als Serviceleistung für Sie durch maschinelle Übersetzung erstellt. Bei eventuellen Unstimmigkeiten hat die englische Sprachversion Vorrang.

Data Mover-Lösung

Beitragende
PDFs

In einem Big-Data-Cluster werden die Daten in HDFS oder HCFS gespeichert, z. B. MapR-FS, Windows Azure Storage Blob, S3 oder Google Filesystem. Wir haben die Tests mit HDFS, MapR-FS und S3 als Quelle durchgeführt, um Daten mithilfe von NIPAM in den NetApp ONTAP-NFS-Export zu kopieren hadoop distcp Befehl aus der Quelle.

Das folgende Diagramm zeigt die typische Datenverschiebung von einem Spark-Cluster mit HDFS-Storage auf ein NetApp ONTAP-NFS-Volume, sodass NVIDIA KI-Vorgänge verarbeiten kann.

Die Abbildung zeigt den Input/Output-Dialog oder die Darstellung des schriftlichen Inhalts

Der hadoop distcp Befehl kopiert die Daten über das MapReduce-Programm. NIPAM funktioniert mit MapReduce als Treiber für den Hadoop Cluster beim Kopieren der Daten. NIPAM kann eine Last für einen Export über mehrere Netzwerkschnittstellen verteilen. Dieser Prozess maximiert den Netzwerkdurchsatz, indem die Daten beim Kopieren der Daten von HDFS oder HCFS auf NFS über mehrere Netzwerkschnittstellen verteilt werden.

Hinweis NIPAM wird nicht mit MapR unterstützt oder zertifiziert.