技术概述
本节概述了采用Domino数据实验室和NetApp的混合云MLOps的技术。
Domino数据实验室
Domino Data Lab凭借其领先的企业级AI平台为模型驱动型企业提供支持、该平台受到超过20%的财富100强企业的信赖。Domino可加快数据科学工作的开发和部署速度、同时增强协作和监管。有了Domino、全世界的企业可以开发更好的药物、种植更具生产力的作物、建造更好的汽车等等。Domino成立于2013年、由Coatue Management、Great Hill Partners、高地资本、Sequoia Capital和其他主要投资者提供支持。
Domino支持企业及其数据科学家在一个统一的端到端平台上快速、负责任且经济高效地构建、部署和管理AI。团队可以在任何环境中访问所需的所有数据、工具、计算、模型和项目、因此他们可以进行协作、重复利用过去的工作、跟踪生产中的模型以提高准确性、采用最佳实践进行标准化、以及让AI成为负责任和受监管的企业。
-
*开放且灵活:*访问最广泛的开放源代码和商业工具及基础架构生态系统,获得最佳创新,不受制于供应商。
-
*记录系统:*整个企业的人工智能运营和知识中心、支持最佳实践、跨职能协作、加快创新速度和提高效率。
-
*集成:*集成工作流和自动化—专为企业流程、控制和监管而构建—可满足您的合规性和法规要求。
-
*混合多云:*在靠近数据的位置运行AI工作负载—内部环境、混合环境、任何云或多云—以降低成本、优化性能和合规性。
Domino Nexus
Domino Nexus是一个单一管理平台、支持您跨任何云、区域或内部环境中的任何计算集群运行数据科学和机器学习工作负载。它统一了整个企业中的数据科学孤岛、让您有一个地方来构建、部署和监控模型。
NetApp BlueXP
NetApp BlueXP将NetApp的所有存储和数据服务统一到一个工具中、让您可以构建、保护和管理混合多云数据资产。它可以跨内部环境和云环境为存储和数据服务提供统一的体验、并通过AIIOPS的强大功能实现运营精简性、同时还具有当今云主导环境所需的灵活使用参数和集成保护。
NetApp ONTAP
ONTAP 9是NetApp推出的最新一代存储管理软件、可帮助企业打造现代化的基础架构并过渡到云就绪数据中心。借助行业领先的数据管理功能,无论数据位于何处, ONTAP 都可以通过一组工具来管理和保护数据。您还可以将数据自由移动到需要的任何位置:边缘,核心或云。ONTAP 9包含许多功能、可简化数据管理、加快和保护关键数据、并在混合云架构中实现下一代基础架构功能。
简化数据管理
数据管理对于企业IT运营和数据科学家至关重要、这样才能将适当的资源用于AI应用程序和训练AI/ML数据集。以下有关NetApp技术的追加信息 不在此验证范围内、但可能与您的部署相关。
ONTAP 数据管理软件包括以下功能、可简化操作并降低总运营成本:
-
实时数据缩减和扩展的重复数据删除。数据缩减可减少存储块中浪费的空间、重复数据删除可显著提高有效容量。此适用场景数据存储在本地,并分层到云。
-
最低、最高和自适应服务质量(AQoS)。精细的服务质量(QoS)控制有助于在高度共享的环境中保持关键应用程序的性能水平。
-
NetApp FabricPool。可将冷数据自动分层到公有 和私有云存储选项、包括Amazon Web Services (AWS)、Azure和NetApp StorageGRID Storage解决方案。有关 FabricPool 的详细信息,请参见 "TR-4598:FabricPool 最佳实践"。
加速和保护数据
ONTAP 可提供卓越的性能和数据保护、并通过以下方式扩展这些功能:
-
性能和更低的延迟。ONTAP 可提供尽可能高的吞吐量和尽可能低的延迟。
-
数据保护ONTAP 可提供内置数据保护功能、并在所有平台之间进行通用管理。
-
NetApp卷加密(NVE)。ONTAP 提供原生 卷级加密、并支持板载和外部密钥管理。
-
多租户和多因素身份验证。ONTAP 支持以最高的安全性级别共享基础架构资源。
Future-Proof 基础架构
ONTAP 可通过以下功能满足不断变化的苛刻业务需求:
-
无缝扩展和无中断运行。ONTAP 支持无中断地向现有控制器和横向扩展集群添加容量。客户可以升级到 NVMe 和 32 Gb FC 等最新技术,而无需进行成本高昂的数据迁移或中断。
-
云连接。ONTAP是云互联程度最高的存储管理软件、可在所有公有云中选择软件定义的存储和云原生实例。
-
与新兴应用程序集成。ONTAP 通过使用支持现有企业应用程序的相同基础架构、为下一代平台和应用程序(例如自动驾驶汽车、智能城市和行业4.0)提供企业级数据服务。
Amazon FSx for NetApp ONTAP (FSx ONTAP)
Amazon FSx ONTAP是第一方完全托管的AWS服务、可提供基于NetApp流行的ONTAP文件系统构建的高度可靠、可扩展、高性能和功能丰富的文件存储。FSx ONTAP将NetApp文件系统的熟悉特性、性能、功能和API操作与完全托管的AWS服务的敏捷性、可扩展性和精简性相结合。
NetApp Trident
Trident支持在公有云或内部环境中的所有常见NetApp存储平台上使用和管理存储资源、包括ONTAP (AFF、FAS、Select、云、Amazon FSx ONTAP)、Element软件(NetApp HCI、SolidFire)、Azure NetApp Files服务以及Google Cloud上的Google Cloud NetApp卷。Trident是一款符合容器存储接口(CSI)的动态存储编排程序、可与Kubnetes本机集成。
Kubernetes
Kubernetes 是一款开源分布式容器编排平台,最初由 Google 设计,现在由 Cloud 原生计算基金会( CNCF )维护。Kubnetes支持容器化应用程序的部署、管理和扩展功能自动化、是企业环境中的主要容器流程编排平台。
Amazon Elelic Kubelnetes Service (EKS)
Amazon El生 性Kubelnetes Service (Amazon EKS)是AWS云中的托管Kubelnetes服务。Amazon EKS会自动管理Kubersnetes控制平台节点的可用性和可扩展性、这些节点负责计划容器、管理应用程序可用性、存储集群数据以及其他关键任务。借助Amazon EKS、您可以利用AWS基础架构的所有性能、扩展性、可靠性和可用性、以及与AWS网络和安全服务的集成。