没有数据,就没有AI。然而长期以来,数据和存储在AI领域中或多或少受到忽视,相比之下,计算以及一定程度上的网络技术获得了更多关注。这种情况正在发生改变。在本周的超级计算大会上,Hammerspace发布了自家的Hammerspace Data System,这是一套专为AI打造的单一数据系统。该系统的一个关键组成部分是Hammerspace OFP,这是一种基于DPU的存储方案,能进一步简化架构设计。
我们已经关注Hammerspace数年时间。此前,该公司是一家软件公司,简而言之,其工作重点主要是通过全局命名空间让组织内的所有数据实现集中可用,编排数据的最终存放位置,并对数据访问进行加速。
后者也被称为Tier 0(零级存储)。几年前,Hammerspace开发出一种方法,能够利用GPU服务器中的高速NVMe闪存——这是Nvidia自身实际上从未使用过、但通常会直接内置于GPU服务器中的存储资源——来处理那些需要最高性能,尤其是最低延迟的任务。
此前,该公司的产品被称为Hammerspace Data Platform。从今天开始,它将被命名为Hammerspace Data System。该系统不仅加入了前面提到的Hammerspace开放闪存平台(OFP),还引入了Data Intelligence功能和全新的Tier 0解决方案。
今天的这些公告还意味着,Hammerspace不再仅仅是一家软件供应商。该公司如今也开发存储硬件,并与多家合作伙伴一起,正式进入完整系统市场。
大约一年半前,Hammerspace是开放闪存平台倡议的首批成员之一。其他成员包括Linux社区、洛斯阿拉莫斯国家实验室、ScaleFlux、SK海力士和Xsight Labs。
根据该倡议发起方的说法,现有的GPU与数据连接模式在AI时代已经不够用了,且这一问题依然存在。这种连接方式需要变得更高效、更快速,且更简洁。其成果便是一个基于DPU、完全集成的存储层。换言之,不再需要基于x86架构的服务器,因此也不再需要CPU。GPU可以直接与集成了DPU的存储进行通信。
Hammerspace OFP存储模块中的DPU承载了所有必要的逻辑功能。在实际应用中,这指的是pNFS逻辑,因为该方案采用的正是这一协议。除此之外,用户只需要一个Linux客户端(当然还需要GPU)即可开始使用。采用pNFS协议意味着元数据和数据可以分离处理,从而实现出色的性能扩展能力。
换句话说,Hammerspace成功地让AI存储实现了极小的占地面积。DPU本身占用空间不大,设备内部的NVMe硬盘同样如此。总体而言,每个机架单元(1U)可容纳40块SSD,分布在五个存储模块中。
每个存储模块配备一个DPU(来自Xsight Labs)和两个400GbE端口。总体来看,单个机架单元可容纳近10PB的原始容量。但需要注意的是,这一容量需要采用QLC闪存才能实现。若要达到400 GB/s的最高读取速度,则必须改用TLC闪存。
接下来值得关注的是,作为一款pNFS产品,Hammerspace OFP与NetApp近期发布的NetApp Novus中pNFS实现方式相比表现如何。这是解决本质上同一问题的两种不同方案:确保数据和存储不再成为GPU系统的性能瓶颈。除了性能、占地面积等方面的比较,另一个值得关注的问题是该方案融入现有环境的便捷程度。像OFP这样全新的产品,刚推出时未必能做到一帆风顺。
数据向计算靠拢,而非反向而行在实际应用中,这可能意味着只需在机架顶部放置一到两个这种新型存储单元,然后用GPU填满机架的其余空间。如果一切都能如Hammerspace所说那样运作,这将是一种为计算资源添加存储的极为高效的方式。
Hammerspace在这里的做法确实有点反传统。许多供应商都在谈论将计算能力带到数据所在之处。而通过OFP,Hammerspace恰恰反其道而行之。可以说,它将存储和计算整合到了一套单一系统之中。无论如何,这是一套可以作为完整套餐进行采购和部署的系统。为此,Hammerspace已经联合了多家合作伙伴,包括思科、日立Vantara和Supermicro。
除了围绕Hammerspace OFP的重大公告之外,我们几乎忘了该公司今天还有另一项颇为重要的公告。通过Data Intelligence功能,Hammerspace为其计划通过自家Data System提供的完整系统,增添了一项非常关键的能力:实现数据洞察,具备与数据交互的能力,并能够在需要时(例如需要设定某项策略时)采取相应行动。
如前所述,Data Intelligence无疑十分重要。然而,Hammerspace并非首个推出这一功能的公司。今年早些时候,我们曾报道Everpure发布了一项功能,这项功能不仅同样被称为Data Intelligence,而且实现的功能本质上也是一样的。
这并不是说Hammerspace的这项公告没有价值,恰恰相反,其价值相当可观。如果没有Data Intelligence,公司就无法宣称自己拥有一套真正的Data System,因此这对该公司而言是一个出色的举措。只是需要明确认识到,这项功能并非具有颠覆性的创新,至少不如Hammerspace OFP那样具有突破性,尽管二者都是整体方案中不可或缺的一部分。
