用于AI和MO系统的新存储库将提供什么?

MAX Data将与Optane DC结合使用,以有效地与AI和MO系统配合使用。


照片-Hitesh Choudhary-未飞溅

根据《麻省理工学院斯隆管理评论》和波士顿咨询集团的一项研究,在接受调查的三千名经理中,有85%的人认为AI系统将帮助他们的公司在市场中获得竞争优势。 但是,只有39%的公司尝试在实践中实施类似的措施。

造成这种情况的原因之一是有效地处理数据并优化机器学习任务的容量使用并不容易。 IDC 指出 ,基于持久性存储器(PMEM)的新技术可以解决这种情况。

NetApp和英特尔通过结合 NetApp加速内存(MAX)数据和Intel Optane DC持久性内存提出了这项技术,以创建基于非易失性内存的本地数据存储产品。

如何运作


MAX Data是一项服务器技术,可通过使用PMEM或DRAM来提高应用程序性能,但无需重新设计软件体系结构。

它实现了自动分层存储的原理,根据使用频率按级别和存储分布数据-对于“冷”数据,使用了更易访问的存储,而经常使用的在“持久性”中-持久存储器中,这可最大程度地减少使用此类数据时的延迟。

1.1版使用DRAM和NVDIMM 。 与Optane DCPMM相比,这两种实现都有其缺点-效率的相对损失和较高的存储成本。 此处提供了一个图表,提供了延迟的比较估计(第4页)。

该技术支持 POSIX并使用块或文件系统的语义。 使用MAX Snap和MAX Recovery实现存储级数据保护和恢复。 这些技术使用快照,SnapMirror工具和其他ONTAP防御机制。

示意性地,实现如下:



此方案尚无PMEM,但开发人员承诺在年底之前增加对这种类型内存的支持。 到目前为止,Max Data可与DRAM和DIMM一起使用。

解决方案的潜力


IDC 声称 ,随着公司数据的不断增长,以及公司缺乏有效处理数据的能力,在未来几年中,将有更多类似MAX Data的发展。 这项技术可以在大规模的云环境中派上用场,并且可以用于处理诸如训练神经网络之类的资源密集型任务。 它会在交易平台,信息安全系统和任何其他需要持续且快速访问大量信息的软件产品中找到应用。

该技术在某种程度上也不会立即在市场中扎根。 如上所述,以一种或另一种形式,全球只有三分之一的公司使用AI系统。 从这个角度来看,许多人认为MAX Data的出现还为时过早,并且将重点放在可解决当前问题的更易访问的基础结构上。



我们的其他IT基础架构材料:

Source: https://habr.com/ru/post/zh-CN451166/


All Articles