O que os novos repositórios para sistemas AI e MO oferecem?

O MAX Data combinará com o Optane DC para funcionar efetivamente com os sistemas AI e MO.


Fotos - Hitesh Choudhary - Unsplash

De acordo com um estudo do MIT Sloan Management Review e do Boston Consulting Group, 85% dos três mil gerentes pesquisados ​​acreditam que os sistemas de IA ajudarão suas empresas a obter uma vantagem competitiva no mercado. No entanto, apenas 39% das empresas tentaram implementar algo semelhante na prática.

Uma das razões para essa situação é que não é fácil trabalhar com dados com eficiência e otimizar o uso de capacidades para tarefas de aprendizado de máquina. A IDC observa que uma nova tecnologia baseada na Memória Persistente (PMEM) pode resolver a situação.

A NetApp e a Intel propuseram essa tecnologia combinando os dados do NetApp Memory Accelerated (MAX) e a memória persistente Intel Optane DC para criar um produto para armazenamento de dados local baseado em memória não volátil.

Como isso funciona


O MAX Data é uma tecnologia de servidor que melhora o desempenho do aplicativo através do uso de PMEM ou DRAM, mas não requer uma reformulação da arquitetura do software.

Ele implementa os princípios de armazenamento hierárquico automatizado, distribuindo dados por níveis e armazenamentos, dependendo da frequência de uso - para dados "frios", é usado armazenamento mais acessível, e os mais usados ​​estão "à mão" - na Memória Persistente, o que minimiza o atraso ao trabalhar com esses dados. .

A versão 1.1 usa DRAM e NVDIMM . Ambas as implementações têm suas desvantagens - perda relativa de eficiência e alto custo de memória, respectivamente - em comparação ao Optane DCPMM. Um gráfico com uma estimativa comparativa do atraso é apresentado aqui (página 4).

A tecnologia suporta POSIX e trabalha com a semântica de sistemas de bloco ou arquivo. A proteção e recuperação de dados no nível de armazenamento são implementadas usando o MAX Snap e o MAX Recovery. Essas tecnologias usam instantâneos, a ferramenta SnapMirror e outros mecanismos de defesa ONTAP.

Esquematicamente, a implementação é a seguinte:



Ainda não existe um PMEM nesse esquema, mas os desenvolvedores prometem adicionar suporte para esse tipo de memória no final do ano. Até o momento, a Max Data trabalha com DRAM e DIMM.

Potencial de solução


A IDC afirma que nos próximos anos haverá mais desenvolvimentos, como o MAX Data, pois os dados corporativos estão em constante crescimento e as empresas não têm capacidade de processá-los com eficiência. A tecnologia pode ser útil em um ambiente de nuvem em larga escala e para trabalhar com tarefas que consomem muitos recursos, como o treinamento de redes neurais. Ele encontrará aplicativos nas plataformas de negociação, nos sistemas de segurança da informação e em qualquer outro produto de software que exija acesso constante e rápido a grandes quantidades de informações.

Há também um certo grau de probabilidade de que a tecnologia não se enraíze imediatamente no mercado. Como observamos acima, de uma forma ou de outra, apenas um terço das empresas em todo o mundo trabalha com sistemas de IA. Desse ponto de vista, a aparência do MAX Data pode ser considerada prematura por muitos e se concentrará em uma infraestrutura mais acessível que permita solucionar os problemas atuais.



Nossos outros materiais de infraestrutura de TI:

Source: https://habr.com/ru/post/pt451166/


All Articles