O NetApp Novus é uma solução de sistema de storage de arquivos com escalabilidade horizontal, projetada para a taxa de transferência e a escalabilidade necessárias para cargas de trabalho modernas de IA. Ele reúne muitos clusters de storage ONTAP independentes em um único namespace que os clientes veem como um único sistema de arquivos. O Novus é baseado em NFS paralelo (pNFS), que separa os metadados dos dados dos arquivos. Um serviço dedicado de metadados gerencia o namespace, enquanto os clusters de storage fornecem dados de arquivos diretamente aos clientes em paralelo. Isso remove o limite máximo de taxa de transferência de um único cluster de storage, que não limita mais a rapidez com que o sistema pode fornecer dados.

Uma implementação do Novus pode crescer simplesmente com a adição de clusters de storage. Cada novo cluster adiciona toda a sua largura de banda e capacidade ao namespace, de modo que a taxa de transferência total aumenta à medida que o sistema cresce, sem remontagens de cliente nem rebalanceamento disruptivo. O serviço de metadados é dimensionado separadamente dos servidores de dados, para que você possa expandir o tamanho do namespace e o desempenho dos metadados de acordo com a carga de trabalho. O Novus foi projetado para executar cada nó de storage em velocidade máxima e tratar falhas de componentes como rotineiras e não disruptivas em grande escala. O objetivo principal é manter os dados fluindo para a computação, mesmo quando o sistema cresce para tamanhos muito grandes.

Os clientes usam um cliente NFS padrão, o que torna o Novus fácil de adaptar a grandes clusters de GPUs e de computação. Além disso, o Novus oferece alocação a vários clientes, permitindo que uma única implantação hospede vários clientes ou cargas de trabalho isolados, cada um com seus próprios namespaces. Ele também se baseia no gerenciamento e na proteção de dados comprovados do ONTAP. Para os clientes, isso significa storage capaz de manter as GPUs ocupadas, reduzir o custo da infraestrutura ao obter mais desempenho de cada nó e oferecer suporte a conjuntos de dados muito grandes em um único namespace.

A Novus pode ajudar organizações que executam IA e outras cargas de trabalho com uso intensivo de dados em grande escala. Isso geralmente inclui neoclouds, provedores de GPU como serviço, nuvens soberanas, hiperescaladores, bem como grandes empresas e organizações de pesquisa que executam treinamento e inferência de IA. A Novus pode beneficiar qualquer cliente que use computação de alto desempenho ou processamento de mídia e precise de vários terabytes por segundo de taxa de transferência e queira escalar o storage juntamente com sua computação.

O Novus foi projetado e construído com base em diversos princípios fundamentais. Essas escolhas arquitetônicas subjacentes impulsionam seu desempenho, escalabilidade e resiliência. Isso ajuda os clientes que precisam de armazenamento de alto desempenho que mantenha a GPU ocupada e reduza os custos de infraestrutura.

O Novus é uma implementação definido por software do protocolo Network File System (NFS). Ele depende do NFSv4, especificamente da extensão Parallel NFS (pNFS), para separar os caminhos de metadados e de dados. Os clientes podem usar clientes NFS padrão para acessar o Novus Data Director (NDD) usando NFSv4, enquanto acessam os dados diretamente nos servidores de dados do ONTAP usando NFSv3.

Existem vários conceitos adicionais relevantes para o Novus e para a tecnologia subjacente.