En conclusion, en ce qui concerne la formation distribuée à grande échelle (notamment dans un environnement de cloud public), le composant d'orchestration et de stockage des ressources est essentiel à la solution. S'assurer que la gestion des données n'entrave pas le traitement plusieurs GPU, ce qui optimise l'utilisation des cycles GPU. Ainsi, le système est aussi rentable que possible à des fins de formation distribuée à grande échelle.

La Data Fabric fournie par NetApp relève le défi en permettant aux data Scientists et aux ingénieurs de données de se connecter sur site et dans le cloud à des données synchrones, sans aucune intervention manuelle. En d'autres termes, la Data Fabric opère en douceur pour gérer les workflows d'IA répartis sur plusieurs sites. Cette solution facilite également la disponibilité des données à la demande en rapprochant les données de calcul et en exécutant des opérations d'analyse, d'entraînement et de validation, quand et où vous en avez besoin. Cette fonctionnalité permet non seulement l'intégration des données, mais aussi la protection et la sécurité de l'ensemble du pipeline de données.