存储评论网

方程式黑色深潜

企业版  ◇  企业存储

在数据中心,处理器和存储之间的竞争永无止境。 在过去十年中,处理器的内核数量从一个或两个增加到 8 个、16 个、32 个甚至 64 个。这段时间的存储技术显着降低了延迟并提高了数据吞吐量。 然而,现实是太多的 CPU 周期被浪费在等待驻留在 PCIe 设备或网络存储上的数据上。 随着一种新型存储硬件的出现:存储级内存 (SCM),我们正在达到一个转折点。 SCM 驻留在内存通道上,不受外围存储的延迟和数据带宽限制的影响。 在内存通道上,SCM 离 CPU 更近了,这意味着它有更多并发的“泳道”来将数据穿梭到现代 CPU 上。 这显着提高了处理器访问数据的速度。

由于 SCM 比常见的数据中心存储解决方案快得多,它有能力重塑我们使用存储的方式。 尽管 SCM 有可能使存储在数据中心技术竞赛中处于领先地位,但只有我们能够利用它,它才能成功——这完全有可能通过设计的能力有效地利用 SCM 的数据存储能力。 在本文中,我们将阐述 SCM 是什么,并讨论是什么让它如此具有变革性:这项技术的前景、我们对其进行测试的过程,以及我们认为它可能在数据中心产生变革的原因。

许多新型硬件技术面临的一个问题是,为了充分利用其功能,可能需要重写或重新架构应用程序或服务。一个典型的例子是,多核处理器刚问世时,为了发挥其优势,必须编写多线程代码。SCM 也曾面临同样的问题,直到一家名为Formulus Black 的公司开发出一种方法,使现有的、未经修改的应用程序也能利用 SCM 来提升性能。Formulus Black开发了一款内存管理软件,它提供了一个符合 POSIX 标准的标准块设备,应用程序无需任何修改即可使用 SCM。Formulus Black 的早期测试表明,使用 SCM 支持的存储的应用程序性能显著提升。我们将在 StorageReview.com 实验室中验证并量化这些性能提升。

在深入了解 Formulus Black 的细节之前,让我们简要回顾一下 SCM 及其背景。 SCM 与我们看到的任何其他服务器存储有很大不同,处理器通过 DIMM 插槽通过内存总线访问它,而不是通过外设总线(如 NVMe 和 SSD/HDD 的情况)——这种处理器方法访问转化为延迟的显着减少。 与 DRAM(非持久性)不同,SCM 会在断电或重启后保留信息。 尽管 SCM 具有优于 SSD/HDD 技术的其他功能,但它的访问速度和持久性是迄今为止最重要的。

单片机内存(SCM)技术的研发历经漫长岁月。由于无法简单地将NAND闪存(目前固态硬盘SSD所使用的技术)插入DIMM内存插槽并期望其发挥良好性能,因此需要开发一种新型半导体。英特尔凭借其3D XPoint芯片在SCM技术领域处于领先地位,该芯片被应用于其Optane数据中心级持久内存产品线。

Intel Optane DC永久性内存模块

英特尔的早期测试表明,3D XPoint 比 NAND 快 100 倍,但只比 DRAM 慢 10 倍。 尽管比 DRAM 慢很多,但 3D XPoint 支持容量更高、成本更低的设备,并且如前所述,具有数据持久性——DRAM 不具备。 尽管市场上有不同的 SCM PMEM 产品,但为简单起见,并且由于英特尔目前似乎是该领域的领导者,我们将在本文中重点介绍其 SCM 产品。

SCM 产品问世后,各公司都需要找到充分利用这项技术的最佳方法——Formulus Black 的Forsa正是为此而生。Forsa 是一款软件栈,它允许创建和管理一种名为逻辑扩展内存 (LEM) 的块级设备,并可使用 SCM 或 DRAM 作为物理内存介质。由于 LEM 符合 POSIX 标准,应用程序可以直接使用它;您可以在其上挂载标准文件系统,也可以将其用于虚拟机 (VM)。需要说明的是,Forsa 也可用于 DRAM,但我们将在 StorageReview.com 实验室中使用 Optane DC 持久内存 (DCPMM) 进行测试。

DCPMM 还有其他块级设备驱动程序,但与其他块级设备不同,Formulus Black 赋予 LEM 企业存储功能,如数据完整性、实时数据缩减、克隆、快照、高可用性等。这些功能可以作为文件系统或直接由应用程序使用(无论 LEM 是否被 VM 使用)。 此外,FORSA 处理使用内存通道所特有的复杂性,例如库存 DCPMM 不具有 NUMA 感知能力,而 FORSA LEM 因其 NURA 架构而具有 NUMA 感知能力。 例如,Forsa 无需在我们测试实验室的 Lenovo SR950 服务器上配置和管理四个独立的 SCM 存储区域,而是将所有 SCM 内存区域映射到多路服务器上的所有 NUMA 节点,并使您能够配置和管理 SCM-基于 LEMs 使用所有的总 SCM 容量。

使用上述企业功能创建和启用 LEM 非常简单,因为 Forsa 有一个基于 Web 的漂亮用户界面。 然而,由于 Formulus Black 具有 API 优先的理念,所有 LEM 管理功能都可以通过其 RESTful API 访问。

为确保数据完整性,Forsa 有一个中央容错管理器 (CFTM),可执行内存错误检查和坏块替换 (BBR)。

为了提高数据效率,Formulus Black 还提供数据缩减功能,这是一种实时内联算法,使用其专有的 Formulus Bit Marker (FbM) 技术来减少重复数据。 Formulus Black 的早期测试表明,FbM 可以增加可存储在相同物理内存介质中的原始数据量,并降低将内存用作快速存储层的每 GB 的有效成本。 然而,在他们部署了许多 RHEL VM 实例的利基案例测试中,他们声称 FbM 将内存的有效存储容量提高了 20 倍以上。 这是由于 FbM 能够检测数据模式,例如 RHEL 的黄金映像实例和跨多个虚拟机实例运行的其他应用程序数据。

对于数据保护,Forsa 可以在高可用性 (HA) 模式下使用,在该模式下,它会在第二个节点上创建要保护的 LEM 的镜像。 我们看到 HA 模式对于高价值 LEM 或使用 DRAM 作为存储支持时非常有用,因为它是非持久性的。

StorageReview Formulus 黑色保护 LEM

您还可以通过将 LEM 备份到 SSD 存储设备来保护它们。 Forsa 的备份功能 BLINK 是您可以在系统上的所有或部分 LEM 上使用的功能。 与 HA 模式一样,我们看到 BLINK 对于高价值 LEM 或在使用 DRAM 作为存储支持时非常有用,因为它是非持久性的。

StorageReview Formulus 黑色选择性闪烁

在某些情况下,您要创建的 LEM 会超出单个服务器上 DRAM 或 SCM 的容量。 为了适应这些情况,您可以使用 Forsa 创建一个跨越两个运行 Forsa 的服务器的 LEM。

StorageReview Formulus 黑色扩展 LEM

运行 Forsa 的硬件要求相对宽松,您可以在 Formulus Black 网站上找到相关信息。而 Intel Optane DC 持久内存的硬件要求则更为严格,因为它仅支持特定的主板和特定型号的最新处理器。本次测试我们将使用一台配置精良的 Lenovo SR950 服务器。这台 SR950 拥有 768 GB 内存、4 颗 8280M CPU、一块用于启动的板载 SATA m.2 SSD 以及 12 块 1.6TB Intel P4610 NVMe SSD。在我们之前的测试中,这台服务器展现出了令人印象深刻的性能。在 VDBench 工作负载测试中,它在 4K 读取模式下实现了超过 5 万 IOPS,在 4K 写入模式下实现了 3.2 万 IOPS。这套系统非常适合测试 Forsa,因为它不会受到任何 CPU 性能瓶颈的限制。您可以在这里找到关于 SR950 的完整评测。

一些应用程序(例如 SAP HANA)已被重写或修改以利用 DCPMM 技术,但绝大多数都没有。 除了有可能使用这种极快的存储之外,Forsa 还扩展了 DCPMM 的功能,因为它支持企业客户所需的功能,例如 HA、备份和通过 FbM 进行数据缩减。 Formulus Black Forsa 有很大的前景,我们期待着在我们的实验室中使用它。 无需重写或重新构建应用程序即可利用 SCM 技术的能力可以使 Forsa 成为 DCPMM 的杀手级应用程序。

Formulus Black 大胆宣称 Forsa 是市场上最快的持久内存块存储接口,并声称 Forsa LEM 的性能甚至优于持久内存本机文件系统。 在 StorageReview,我们期待在我们的实验室中使用它并测试这些声明。

Formulus Black 免费试用

Formulas Black 产品简介(PDF)

本报告由 Formulus Black 赞助。 本报告中表达的所有观点和意见均基于我们对所考虑产品的公正看法。

参与 StorageReview

电子报| YouTube | 播客iTunes / Spotify | Instagram | Twitter | TikTok | RSS订阅

汤姆芬顿

Tom Fenton 在过去 27 年的各种技术中积累了丰富的 IT 实践经验,过去 20 年专注于虚拟化和存储。 他之前曾在 VMware 担任高级课程开发人员、解决方案工程师,并在竞争营销小组工作。 他还曾在 The Taneja Group 担任高级验证工程师,领导验证服务实验室,并在启动其 vSphere Virtual Volumes 实践方面发挥了重要作用。 他在推特上@vDoppler