La version française est une traduction automatique. La version anglaise prévaut sur la française en cas de divergence.

Présentation de la technologie

07/18/2024 Contributeurs

Cette section présente plus en détail les principaux composants de cette solution.

Systèmes NetApp AFF

Les systèmes de stockage NetApp AFF permettent aux entreprises de répondre aux besoins des entreprises grâce aux meilleures performances du secteur, à la flexibilité supérieure, à l'intégration au cloud et à une excellente gestion des données. Conçues spécifiquement pour les systèmes Flash, les baies AFF contribuent à accélérer, gérer et protéger les données stratégiques.

Ce graphique représente l'avant du contrôleur de stockage NetApp AFF A400.

Ce graphique représente l'arrière du contrôleur de stockage NetApp AFF A400.

NetApp AFF A400 est un système de stockage Flash NVMe de milieu de gamme qui comprend les fonctionnalités suivantes :

Capacité effective maximale : environ 20 po
Évolutivité scale-out maximale : 2-24 nœuds (12 paires HA)
Prise en charge des hôtes FC 25 GbE et 16 Gb
Connectivité 100 GbE RDMA over Converged Ethernet (RoCE) avec les tiroirs de stockage d'extension NVMe
Les ports RoCE 100 GbE peuvent être utilisés pour la connexion au réseau hôte si les tiroirs NVMe ne sont pas connectés
Tiroirs de stockage d'extension de connectivité SAS de 12 Gbit/s complets
Deux configurations disponibles :
- Ethernet : 4 ports Ethernet 25 Gb (SFP28)
- Fibre Channel : 4 ports FC 16 Gbit/s (SFP+
100 % 8 Ko en lecture aléatoire @.4 ms 400 000 IOPS

Voici les fonctionnalités de NetApp AFF A250 pour les déploiements d'entrée de gamme spécialisés dans l'IA et LE ML :

Capacité effective maximale : 35 po
Évolutivité scale-out maximale : 2-24 nœuds (12 paires HA)
440 000 IOPS en lectures aléatoires à 1 ms.
Basé sur la dernière version de NetApp ONTAP, ONTAP 9.8 ou version ultérieure
Deux ports Ethernet 25 Gb pour la haute disponibilité et l'interconnexion de clusters

NetApp propose également d'autres systèmes de stockage, tels que les systèmes AFF A800 et AFF A700 qui offrent des performances et une évolutivité supérieures pour les déploiements d'IA/ML à plus grande échelle.

NetApp ONTAP

ONTAP 9, la dernière génération de logiciel de gestion du stockage de NetApp, permet aux entreprises de moderniser l'infrastructure et de passer à un data Center prêt pour le cloud. Avec des capacités de gestion des données à la pointe du secteur, ONTAP permet de gérer et de protéger les données avec un seul ensemble d'outils, quel que soit leur emplacement. Les données peuvent aussi être déplacées librement partout où elles sont nécessaires : la périphérie, le cœur ou le cloud. ONTAP 9 comprend de nombreuses fonctionnalités qui simplifient la gestion des données, accélèrent et protègent les données stratégiques et pérennisent l'infrastructure sur toutes les architectures de cloud hybride.

Gestion simplifiée

La gestion des données est essentielle pour les opérations IT, car elle permet d'utiliser les ressources appropriées pour les applications et les jeux de données. ONTAP inclut les fonctionnalités suivantes pour rationaliser et simplifier les opérations et réduire le coût total d'exploitation :

La compaction des données à la volée et la déduplication étendue la compaction des données réduit le gaspillage d'espace dans les blocs de stockage, et la déduplication augmente considérablement la capacité effective. Cela s'applique aux données stockées localement et à leur placement dans le cloud.
Qualité de service (QoS) minimale, maximale et adaptative. les contrôles de qualité de service granulaires permettent de maintenir les niveaux de performance des applications critiques dans des environnements hautement partagés.
ONTAP FabricPool cette fonctionnalité transfère automatiquement les données inactives vers des options de stockage de cloud public et privé, notamment le stockage objet Amazon Web Services (AWS), Azure et NetApp StorageGRID.

Accélération et protection des données

ONTAP offre des niveaux supérieurs de performances et de protection des données et étend ces fonctionnalités aux méthodes suivantes :

* Performances et latence plus faible.* ONTAP offre le débit le plus élevé possible à la latence la plus faible possible.
Protection des données. ONTAP fournit des fonctionnalités de protection des données intégrées avec une gestion commune sur toutes les plates-formes.
NetApp Volume Encryption. ONTAP offre un chiffrement natif au niveau du volume avec prise en charge de la gestion des clés à la fois intégrée et externe.

Une infrastructure pérenne

ONTAP 9 aide à répondre aux besoins métier en constante évolution :

Évolutivité transparente et continuité de l'activité. ONTAP prend en charge l'ajout non disruptif de capacité aux contrôleurs existants et l'évolution scale-out des clusters. Les clients peuvent effectuer la mise à niveau vers les technologies les plus récentes, telles que NVMe et FC 32 Gb, sans migration des données ni panne coûteuse.
Connexion au cloud. ONTAP est le logiciel de gestion de stockage le plus connecté au cloud, avec des options de stockage SDS (ONTAP Select) et des instances natives du cloud (NetApp Cloud Volumes Service) dans tous les clouds publics.
Intégration avec les applications émergentes ONTAP propose des services de données haute performance pour les plateformes et applications nouvelle génération, telles qu'OpenStack, Hadoop et MongoDB, en utilisant la même infrastructure prenant en charge les applications d'entreprise existantes.

Volumes NetApp FlexGroup

Les datasets d'entraînement sont généralement un ensemble de milliards de fichiers. Les fichiers peuvent inclure du texte, de l'audio, de la vidéo et d'autres formes de données non structurées qui doivent être stockées et traitées pour être lues en parallèle. Le système de stockage doit stocker de petits fichiers et doit lire ces fichiers en parallèle pour les E/S séquentielles et aléatoires

Un volume FlexGroup (la figure suivante) est un namespace unique composé de plusieurs volumes de membres constitutifs qui est géré et agit comme un volume NetApp FlexVol pour les administrateurs de stockage. Les fichiers du volume FlexGroup sont alloués aux volumes de membres individuels,et non répartis entre les volumes ou les nœuds. Ils présentent de nombreux atouts :

Jusqu'à 20 pétaoctets de capacité et faible latence prévisible pour les charges de travail comportant un grand nombre de métadonnées
Jusqu'à 400 milliards de fichiers dans le même espace de nom
Opérations parallélisées dans les charges de travail NAS sur les processeurs, les nœuds, les agrégats et les volumes FlexVol constitutifs

Image::a400-thinksystem-image5.png["cette image représente une paire haute disponibilité de contrôleurs de stockage contenant de nombreux volumes avec des fichiers principaux au sein d'un FlexGroup.]"

Gamme Lenovo ThinkSystem

Les serveurs Lenovo ThinkSystem sont dotés de matériel, de logiciels et de services innovants qui répondent aux défis actuels des clients et offrent une approche évolutive, adaptée et modulaire pour répondre aux défis de demain. Ces serveurs exploitent les meilleures technologies standard du secteur, associées à des innovations Lenovo différenciées, pour offrir la plus grande flexibilité possible aux serveurs x86.

Les principaux avantages du déploiement des serveurs Lenovo ThinkSystem sont les suivants :

Des conceptions modulaires extrêmement évolutives qui s'étendent à votre activité
La résilience optimale du secteur pour économiser des heures de temps d'arrêt imprévus coûteux
Des technologies Flash rapides pour des latences plus faibles, des temps de réponse plus rapides et une gestion intelligente des données en temps réel

Dans le domaine de l'IA, Lenovo propose une approche pratique pour aider les entreprises à comprendre et à exploiter les avantages DU ML et de l'IA pour leurs workloads. Les clients Lenovo peuvent explorer et évaluer les offres d'IA de Lenovo dans les centres d'innovation d'IA de Lenovo afin de connaître pleinement la valeur de leur utilisation. Pour améliorer le retour sur investissement, cette approche axée sur le client propose des démonstrations de faisabilité pour les plateformes de développement de solutions prêtes à l'emploi et optimisées pour l'IA.

Lenovo SR670 V2

Le serveur rack Lenovo ThinkSystem SR670 V2 offre des performances optimales pour l'IA accélérée et le calcul haute performance (HPC). Prenant en charge jusqu'à huit GPU, la SR670 V2 est parfaitement adaptée aux exigences de charges de travail de calcul intensives du ML, du DL et de l'inférence.

Cette image représente trois configurations SR670. La première montre quatre GPU SXM avec huit disques HS de 2.5 pouces et 2 emplacements d'E/S PCIe. La seconde montre quatre emplacements GPU double largeur ou huit emplacements GPU simples larges et deux emplacements d'E/S PCIe avec huit disques HS de 2.5 ou quatre disques HS de 3.5 pouces. La troisième montre huit emplacements GPU double largeur avec six disques EDSFF HS et deux emplacements d'E/S PCIe.

Avec les derniers processeurs Intel Xeon évolutifs prenant en charge les processeurs graphiques haut de gamme (notamment le processeur graphique NVIDIA A100 80 Go PCIe 8x), le ThinkSystem SR670 V2 offre des performances optimisées et accélérées pour les workloads d'IA et d'HPC.

En effet, la densité des GPU est plus élevée parce qu'un plus grand nombre de charges de travail utilisent des accélérateurs de performances. Les secteurs tels que le Retail, les services financiers, l'énergie et le domaine de la santé utilisent des GPU pour extraire des informations exploitables et stimuler l'innovation avec des techniques DE ML, d'apprentissage profond et d'inférence.

Le ThinkSystem SR670 V2 est une solution optimisée pour le déploiement de charges de travail HPC et ai accélérées en production. Il optimise ainsi les performances du système tout en maintenant la densité du data Center pour les clusters de supercalculateurs dotés de plateformes nouvelle génération.

Voici quelques-unes des autres fonctionnalités :

Prise en charge des E/S RDMA directes au niveau des GPU, dans lesquelles les adaptateurs réseau ultra-rapides sont directement connectés aux GPU afin d'optimiser les performances d'E/S.
La prise en charge du stockage direct par processeur graphique dans lequel les disques NVMe sont directement connectés aux processeurs graphiques pour optimiser les performances du stockage.

Diminution des

MLPerf est une suite de banc d'essai leader du secteur pour évaluer les performances de l'IA. Lors de cette validation, nous avons utilisé son banc d'essai de classification des images avec MXNet, l'un des frameworks d'IA les plus répandus. Le script d'entraînement MXNet_bancs d'essai a été utilisé pour entraîner l'entraînement à l'IA. Le script contient des implémentations de plusieurs modèles classiques courants et est conçu pour être aussi rapide que possible. Il peut être exécuté sur une seule machine ou en mode distribué sur plusieurs hôtes.