存储评论网

Hammerspace 数据系统推出 OFP,这是一款 1U DPU 闪存托架,额定速度为 390GB/s,最大容量达 9.83PB。

企业版  ◇  企业存储

Hammerspace 已将其软件定义数据平台升级为 Hammerspace 数据系统,并首次将其作为包含硬件的完整系统进行销售。该系统的核心是 Hammerspace 开放式闪存平台 (OFP),这是一个 1U 机架式机架,可容纳五个基于 DPU 的闪存节点,无需 x86 存储服务器。据该公司称,OFP 的写入速度为 390GB/s,每机架单元的 IOPS 为 15 万,原始容量高达 9.83PB。此次发布还新增了数据智能层和用于 GPU 本地 NVMe 的 KV 缓存功能。OFP 现已开始接受报价,预计将于 2027 年上半年发货。

在 SC26 展会上,Hammerspace 数据系统:两个带有紫色网状边框的 Hammerspace 节点,位于一个 OFP 1U 托架上方,托架内装有五个滑轨,安装在一个品牌机架中。

从数据平台到数据系统

Hammerspace 的核心产品是一个并行全局文件系统,它将元数据与数据路径分离,并通过 pNFS、NFS、SMB 和 S3 等协议将现有的 NAS、对象存储和云存储整合为一个统一的命名空间。客户端可以通过标准 Linux 发行版内置的 NFSv4.2 客户端访问该系统,无需任何专有代理,并使用 Hammerspace 为其专为 NFS 规范设计的 Flex Files 布局。该公司将数据系统描述为该软件的扩展,围绕五大功能构建:数据统一、智能、编排、加速和存储,其中智能和存储是新增功能。

商业模式的改变在于,用户可以从 Hammerspace 购买整套系统,包括软件、元数据节点和存储设备的安装和支持。Hammerspace 将元数据节点称为“Anvils”,它们是 1U x86 服务器,提供标准型和大型 M 系列配置,配备两个 100GbE 数据端口,每个站点部署一对高可用性节点,用于运行控制平面,该控制平面管理命名空间并执行放置策略。除了软件部署外,Hammerspace 还提供基于客户硬件的纯软件部署,以及来自 Dell、Supermicro 和 Hitachi Vantara 的 Hammerspace Ready Nodes 节点,以及 AWS、Azure、Google Cloud 和 Oracle Cloud 上的市场镜像。

该系统选项解决了 Hammerspace 在销售中遇到的一个问题:软件虽然赢得了技术评估,但客户最终还是为了简化购买流程而选择了其他供应商的集成产品。该软件采用订阅许可模式,按管理容量定价。Hammerspace 存储通常用于新建 GPU 集群需要高性能存储,而客户现有数据存储在 NetApp、PowerScale 或其他对象存储系统上的情况,这些系统可以由命名空间直接接管。

每个站点的集群都将 Anvil 设备与一组数据服务节点配对,所有集群合并成一个全局文件系统。元数据在站点间持续复制,远距离站点之间的延迟约为一秒,而数据本身仅在策略或访问请求需要时才会移动。作业调度程序可以通过 API 和原生连接器启动数据移动。该公司举例说明,生命科学领域的客户通过 SMB 协议接收仪器数据,通过 pNFS 协议处理数据,然后从同一系统通过 S3 提供服务。

评估通常以概念验证的形式进行,采用自带许可证的云镜像作为自助服务方案。磁盘容量来自硬盘供应商构建的 JBOD 和存储服务器;OFP 是 Hammerspace 的设计,由代工厂商制造,系统由经销商和集成合作伙伴交付。块阵列只有在能够通过 NFS 挂载时才能加入命名空间。

“仅仅增加存储空间并不能解决问题,”Hammerspace创始人兼首席执行官大卫·弗林表示。弗林将此次发布定义为将人工智能工厂设计为计算领域带来的整合模式引入数据领域。

在开放式 Flash 平台内部

每个 OFP 存储单元都是一个完整的存储节点,宽度为机架单元的五分之一,配备八个 U.2 或 U.3 NVMe SSD(分装在两个可拆卸的四盘位硬盘包中)、两个 400GbE QSFP-DD 端口,以及一个 64 核 Arm DPU(数字处理单元),取代了传统的 x86 主板。该 DPU 为 Xsight Labs E1,采用台积电 5nm 工艺制造,拥有 64 个 Arm Neoverse N2 核心、两个 400G MAC、PCIe Gen5,典型功耗为 70W。它运行标准 Linux 系统,每个存储单元在 Hammerspace 文件系统中都显示为一个 NFS 服务器。

Hammerspace OFP 滑架的盖子已打开,露出 Xsight Labs DPU、DDR5 内存模块和网络端口笼。

一个 1U 机架托架可容纳一到五个硬盘托架,每个机架单元最多可容纳 40 个硬盘、320 个 Arm 核心和 10 个 400GbE 端口。Hammerspace 标称,每个硬盘托架最大功率为 360W,每个机架托架最大功率为 1,800W(使用双 2,160W 钛金电源),硬盘托架和硬盘组支持免工具维护,并可通过 IPMI 和 Redfish 进行管理。该托架深度为 106.64 厘米,需要 1,200 毫米的机架,因此不适用于较浅的企业级机柜。Hammerspace 表示,该 4U 机架的硬盘密度是典型 2U 24 盘位 NVMe 服务器的 3.3 倍,即 4U 机架可容纳 160 个 SSD,而后者仅为 48 个。

在 SC26 展会上,Hammerspace Data System OFP 硬盘托架摆放在桌子上,其中一个四盘位硬盘包已部分装好硬盘,另有两个散装的 U.2 NVMe SSD。

配备八块 245.76TB QLC SSD(Hammerspace 列出的最大容量以及KIOXIA LC9等硬盘的容量),一个托架可容纳 1.97PB 原始容量,一个完整的托架可容纳 9.83PB。托架最大功耗为 1,800W,这意味着每 PB 原始容量的功耗约为 183W。托架可兼容 PCIe Gen5 或更早版本的 TLC 或 QLC 硬盘,Hammerspace 将 TLC 定位为高性能硬盘,将 QLC 定位为高容量硬盘。一个装满托架的 42U 机架可容纳约 413PB 容量,功耗高达 75.6kW。

该设计源于Hammerspace于2025年发起的开放闪存平台计划,Xsight Labs和洛斯阿拉莫斯国家实验室等机构也参与其中。Hammerspace在2025年10月表示,量产系统将于2026年初上市,因此计划推迟了大约一年。该存储托架采用U.2和U.3接口的硬盘,因为这些接口的硬盘目前已实现量产,而且Hammerspace在设计时就考虑到了更高密度的外形尺寸。Hammerspace和Xsight曾表示,他们计划实现每个机架1EB的容量,这比目前最大容量的42U硬盘的容量高出两倍以上。

Hammerspace表示,该滑橇式存储设备的原型研发工作大约两年前就开始了,早期采用者主要是超大规模数据中心,他们在每个GPU机架顶部放置一到两个托盘,更看重机架和性能密度而非功耗节省。在这种布局中,Hammerspace将GPU服务器内部的NVMe固态硬盘映射到NVIDIA标注的G3层,并将每个机架中装满TLC闪存的OFP托盘映射到G4层。

性能声明和测试条件

Hammerspace 官方数据显示,五槽位硬盘托架在不启用镜像的情况下,写入吞吐量可达 390GB/s,4K 随机读取 IOPS 可达 15 万。测试条件为:NFSv4.2 文件系统,采用 pNFS over TCP 协议,连接 400GbE 网络,使用企业级 Gen5 TLC SSD。读取速度最高可达每槽位 80GB/s,即每个托架 400GB/s。这意味着每槽位的两个 400GbE 端口分别提供约 40GB/s 的读取速度,考虑到协议开销,这几乎达到了链路饱和状态,因此网络端口限制了读取吞吐量的上限。

DPU散热器带有铜质热管,旁边是U.2 NVMe SSD和一个从Hammerspace OFP托架上拆下来的四盘位硬盘组。

保护机制采用镜像技术,可按文件或目录通过策略进行设置,并可在线更改。双向镜像下,每个托盘的写入速度降至 195GB/s;三向镜像下,写入速度降至 130GB/s。此外,双向镜像还会使可用容量减半,满载 QLC 托盘的可用容量约为 4.9PB。Hammerspace 建议对于可以重新生成的数据(例如 KV 缓存),不使用镜像。该公司声称其产品每机架单元的性能是其未具名的最接近竞争对手的 2 到 5 倍。Hammerspace 尚未公布 OFP 的延迟、客户端数量或 IO500 和 MLPerf Storage 测试结果,我们也没有进行或审核这些测试。

规格 Hammerspace 开放闪存平台
平台概述
卓越 基于DPU的闪存存储节点,不带x86存储服务器
雪橇 8 个 U.2/U.3 NVMe SSD,分两组 4 个硬盘装。
64 核 Arm DPU(Xsight Labs E1)
2 x 400GbE QSFP-DD
1U托盘 1至5辆雪橇
最多 40 个固态硬盘
最多可达 320 个 Arm 核心
高达 10 个 400GbE
驱动器支持 符合标准的 U.2/U.3 SSD,PCIe Gen5 或更早版本
TLC 或 QLC
最大原始容量 每辆雪橇 1.97 磅
每托盘 9.83 磅
基于 245.76TB QLC SSD
操作流程概述 NFSv4.2 与 pNFS
数据保护 按文件或目录的策略进行镜像:无镜像、双向镜像或三向镜像
性能(Hammerspace 数据、第五代 TLC 固态硬盘、400GbE、TCP)
读取吞吐量 每个滑槽 80GB/s
每托盘 400GB/s
写入吞吐量,无镜像 每个滑槽 78GB/s
每托盘 390GB/s
写入吞吐量,三向镜 每个滑槽 39GB/s
每托盘 195GB/s
写入吞吐量,三向镜 每个滑槽 26GB/s
每托盘 130GB/s
4K 随机读取 每个雪橇 3 万 IOPS
每个托盘 15 万 IOPS
力量和体能
最大功率 每个雪橇 360 瓦
每托盘1,800瓦
电源 每托盘双2,160瓦钛金灯
外形 1U 托架,深度 106.64 厘米
需要一个 1,200 毫米的机架
散热器 空气,海平面最高入口温度40摄氏度
管理学 IPMI,红鱼
可用性 现在报价
预计2027年上半年发货

0 层和 KV 缓存

Hammerspace 将 OFP 定位为 Tier 1,位于 Tier 0 之后。Tier 0 由 GPU 服务器内部已有的 NVMe 构成,并通过 NFS 导出,聚合到一个共享的集群级层级,计算节点上无需客户端或代理。写入该层级的数据会在集群内进行镜像以保护,并根据策略移动到其他层级。Hammerspace 表示,一种常见的模式是将训练检查点写入本地,然后让系统将较旧的检查点移动到对象存储。Hammerspace 声称,与外部共享存储相比,Tier 0 的顺序带宽提高了 4.4 倍,延迟降低了 56%,但并未公布测试配置。

KV缓存角色使用同一层级,理由是推理服务器可以从共享存储中重新加载已计算的对话上下文,而无需在GPU上重新计算这些标记。Hammerspace不充当缓存管理器,它将池化的Tier 0 NVMe(其后有OFP)作为POSIX存储提供给推理软件的缓存管理器使用。

数据智能:目录、深度扫描和自然语言查询

数据智能层始于一个目录,该目录无需移动数据即可索引命名空间内所有存储系统中的文件和对象元数据。第二层 DeepScan 可按需或按计划打开文件,查找个人、财务和受保护的健康信息,并将查找结果转换为可搜索的标签。客户可以通过其选择的语言学习管理 (LLM) 以自然语言编写查询。查询结果会提供给现有的策略引擎(Hammerspace 称之为目标),因此管理员可以查找所有标记为“培训就绪”或“仅限特定国家/地区”的文件,并针对这些文件设置放置规则。

Hammerspace 数据系统的数据目录视图,按站点显示容量,按索引显示文件数,显示内容类型分布、索引增长情况和文件年龄,并在 Hammerspace 产品页面上提供示例数据。

目标是附加到共享、卷、目录或文件的声明性规则,例如将数据保持 30 天不变或在三个站点保留三个副本。新的自动化功能会根据容量阈值、计划和事件等条件触发这些规则,并在更改获得批准前进行预览。标签会沿着目录树向下继承,并随文件在存储系统和云端之间移动。该软件支持任何供应商的文件和对象存储,但不管理结构化数据。

Hammerspace 自动化视图列出了包含指标、计划和事件条件的触发规则,并在 Hammerspace 产品页面上提供了示例数据。

早期客户及前景

发布时的参考客户是 kaiko,一家在阿姆斯特丹和苏黎世设有办事处的临床人工智能公司,该公司利用影像和病理数据训练模型。kaiko 将 Hammerspace 部署在 Microsoft Azure 以及 Nebul 和 Nebius GPU 云上,作为一个统一的命名空间,并使用其 GPU 节点中的 NVMe 作为 Tier 0 进行训练,同时根据策略在 Azure Blob 存储上设置了检查点。Hammerspace 表示,kaiko 在这三个集群上的所有机器学习工程工作流程都已迁移到该系统。该案例研究不涉及 OFP 硬件。

Hammerspace告诉我们,kaiko在Nebius平台上从大约128个GPU扩展到1,000多个GPU的过程中采用了该系统,并且其在Nebul云平台上现有的全闪存NAS也已就地迁移到了该命名空间。该公司还介绍了一家未具名的超大规模人工智能研究实验室,该实验室在Lustre成为其最大支持工单来源的一年后,用AWS上的30PB Hammerspace集群替换了用于Lustre的Amazon FSx,现在正将该命名空间扩展到其本地数据中心。Hammerspace表示,该数据中心的大文件操作速度提高了约三倍。

OFP 与其他将 DPU 置于存储服务器原处理器位置的设计类似,例如NVIDIA 在 GTC 大会上推出的BlueField-4 STX 参考架构。Hammerspace的版本与之不同之处在于,它搭配了一个无需硬件即可运行的文件系统。Hammerspace 将在 SC26 大会上展示该硬件,但尚未公布价格。

我们在 SC26 展会上与 Hammerspace 一起拍摄了 OFP 滑橇和托盘的演示视频,我们将在文章发布时将该视频添加到本文中。

锤空数据系统

Hammerspace 开放闪存平台

参与 StorageReview

电子报| YouTube | 播客iTunes / Spotify | Instagram | Twitter | TikTok | RSS订阅

布赖恩·比勒

Brian 位于俄亥俄州辛辛那提市,是 StorageReview.com 的首席分析师兼总裁。