StorageReview 企业测试实验室

要评估企业硬件，拥有合适的测试环境对于生成行业认可的性能和可用性指标至关重要。 我们与计算、存储、网络和基础设施等多个细分市场的许多行业领先供应商合作，为新发布的和下一代硬件提供信息丰富的评估。 这些公司与 StorageReview 合作，提供有关测试方法的意见和反馈，并向我们的实验室捐赠设备，以将其整合到我们多样化的测试环境中。 为此，StorageReview 建立了最大的独立测试实验室之一，通过严格的真实世界测试场景对硬件进行测试，为买家提供做出明智购买决定所需的信息。

随着我们多年来的发展，我们的实验室和硬件也需要保持我们的日常运营顺利进行。 最近，我们完成了对现有测试实验室的大修，将其移至更大的位置，并增加了功率容量。 这个新实验室提供了许多我们过去使用过的相同硬件元素，尽管数量要多得多。 我们的电气能力以及我们的电源调节和机架空间都大幅增加。 我们与 Eaton Electrical 密切合作，将我们的主要实验室从三个机架扩展到五个机架，迁移到新的 12kW Eaton BladeUPS 备用电池，并使用 Eaton 计量和管理的 ePDU 简化配电。 我们新的实验室设计还提供了一种更友好的“城市”氛围，适合现场访问以及高效的硬件安装访问，以减少我们评估过程中从盒子到机架的时间。

为了补充我们的新实验室，Dell EMC 一直是出色的合作伙伴，帮助 StorageReview 扩展新的 Purley 级服务器以利用性能评估。 通过添加 12 台顶级规格的 Dell EMC PowerEdge R740xd 服务器，我们的实验室能够让最新的存储平台成为测试的瓶颈，而不是我们的计算硬件。 与之前的服务器更新一样，我们也与组件供应商密切合作，包括 Intel、Mellanox、Emulex、Netgear、Brocade、Avago、Micron、Toshiba 和其他供应商，以根据各自的测试需求定制这些服务器。 此外，联想、惠普和超微还提供了 Haswell、Ivy Bridge 和 Sandy Bridge 级服务器，以补充我们实验室的其他领域； 提供多种平台供您选择。

虽然 StorageReview Enterprise 测试实验室中的硬件列表不断增长并适应我们的日常需求，但我们会尽力提供当前机架或现有设备的列表。 该硬件还可用于特殊项目或根据需求或产品评估添加。

• 企业存储性能基准
• 虚拟工作站测试实验室
• 机架硬件
  • 伊顿 42U S 系列封闭式机架 （x6）
• 电源/温度监控
  • 带机架电源模块的伊顿 BladeUPS UPS（主要 – 12,000W）
  • 伊顿 9PX6K UPS （中学 – 5400W）
  • 伊顿高级监控 ePDU
  • 伊顿 G3 计量输入 ePDU 点¯x3
  • 伊顿 G3 管理型 ePDU
  • 伊顿环境机架监控器 (ERM)
  • 伊顿智能电源管理器
• 散热器
  • TrippLite SRCOOL12K (12,000 BTU) x 2
  • TrippLite SRCOOL24K（24,000 BTU）
  • 定制新鲜空气冷却（初级实验室冷却）
• 社交
  • 戴尔网络 Z9100 x 2
  • 戴尔网络 S4048 x 2
  • Netgear ProSafe GSM7352S 48 端口 1GbE 交换机
  • Netgear ProSafe M7100 24 端口 10GbE 交换机
  • Netgear ProSafe XS712T 12 端口 10GbE 交换机
  • Netgear ProSafe GS752TS 52 端口 1GbE 交换机
  • Netgear ProSafe M4100 POE+ 24 端口 1GbE 交换机
  • Netgear ProSafe GS752TXS 52 端口 1GbE 交换机 x 2
  • Brocade 6510 16Gb 光纤通道交换机 点¯x2
  • Broadcom G620 32Gb 光纤通道交换机 x 2
• 计算 
  • 戴尔易安信 PowerEdge R740xd (x12)
  • 戴尔 PowerEdge R730 G13 （x12）
  • 惠普 Z620 工作站
  • 惠普 Z640 工作站
  • 联想 ThnkSystem SR850
  • 联想 ThinkSystem SR635
• 企业 NAS/SAN
  • NetApp AFF A200
  • DotHill AssuredSAN Ultra48
  • DotHill 保证 SAN 4824
  • ExaGrid EX21000E
• 保护性存储
  • Perma-A-Store 的 Turtle Case 
    • 039 2.5″ 60 容量防水套 （x2）
    • 549 3.5″ 30 容量防水套 （x3）

机架硬件

主要 StorageReview 测试实验室的最大组件是我们的五个 Eaton 42U S 系列机架。 它们允许我们将存储硬件置于其本地环境中，并使其靠近电源、网络和计算硬件。 在考虑环境需求时，在机架安装环境中安装硬件也有助于适当的气流并降低系统和组件的温度。

在我们当前的布局中，我们将永久计算基础设施划分为中央机架，将外部机架划分为正在测试的硬件，以便在通过审查过程安装和移除硬件期间将中断降至最低。 一个机架专用于主要的电源调节设备以及不需要正式机架进行测试的更多瞬态 NAS 平台。 这种布局使我们能够将多种互连类型的网络布线布线整齐地组织起来，这占据了所有机架后部的大部分空间。

从每个机架的后部，您可以看到 ePDU 安装在各自的 0U 位置，尽管我们将主要电源线隐藏在顶部每个伊顿 S 系列机架内置的线槽中。 我们的大部分硬件通过传统的输入计量 ePDU 连接，而某些设备通过我们的 Eaton Advanced Monitored ePDU 获得插座电平监控。

最后，我们还有一个托管 ePDU，通过它连接更大的存储阵列或某些开关，以便在测试后远程断开电源或切换某些可能需要偶尔重启的组件。 为了最大限度地降低电力成本和冷却要求，我们非常关注高效的电力使用，电力监控和管理是我们实验室重点关注的一个关键部分。

为了可靠地进行日常计算和存储操作，我们使用补充排气扇调节实验室温度，将热空气排出房间，并配备了两个便携式冷却器以应对更高的热负荷。 与运行任何测试或开发环境相比，与传统的生产环境不同，冷却需求是一个快速变化的目标，电力使用及其相关的热输出在测试之间变化很大。

电力基建

在组件级别，随着每一代新产品的推出，功耗不断下降，但在数据中心级别，运行多个交换机、服务器、SAN 和其他所需设备所需的总功率却在不断增加。 StorageReview 实验室提供范围广泛的公用设施选项，并以进入我们大楼的三相电源为后盾。

为了在逐个插座的基础上处理这种大规模配电，我们使用伊顿 ePDU 和备用电池。 我们的大部分电力是通过伊顿 BladeUPS 备用电池供电的，伊顿 9PX6K UPS 处于冷待机状态，用于维护和更大的电力负载。 此设置可确保无论出现何种外部条件，短期电力中断都不会干扰我们的日常运营。 我们还通过利用可轻松扩展以支持更多模块的 BladeUPS 平台，围绕未来的增长进行规划。

通过利用伊顿的智能电源管理器或 IPM 进行持续的 24/7 电源监控，我们确保测试顺利进行，电源条件干净，异常电源条件不会影响我们的测试。 由于评估需要数周或数月的时间，而测试则需要数天的时间，因此在我们审查企业硬件时，确保一切正常运行是一个重要的考虑因素。

为了在逐个插座的基础上处理这种大规模配电，我们在实验室中使用了各种伊顿 PDU。 该列表包括一个高级监控 ePDU、三个 G3 计量输入 ePDU 以及一个 G3 托管 ePDU。 电源通过伊顿机架电源模块提供，该模块共享我们的 BladeUPS 备用电池的输出。

每个 ePDU 通过其自己的 24A L6-30R 连接器连接到 RPM 后部，具有多级电源监控以适当地平衡每个电源相位的电源负载。

网络基础设施

StorageReview 企业测试实验室支持所有主要互连标准，包括 1Gb、10Gb 和 40/56Gb 以太网、8Gb 和 16Gb 光纤通道以及 56Gb InfiniBand。 这些由包括 Brocade、Emulex、Intel、Mellanox、Netgear 和 QLogic 在内的合作伙伴提供。 这种广泛的网络基础设施使我们能够在每个主要存储平台上执行测试，同时确保它具有支持的最快接口。

为了通过 SSH、RDP 或 iKVM 与设备交互，我们使用 1GbE 以太网基础设施拆分成多个 VLAN 来分隔正常的办公室和实验室通信。 这包括用于我们办公室的 C 类网络，以及用于实验室测试的 B 类网络，它为我们提供了超过 65,000 台可寻址主机。 我们的 1GbE 基础设施由 Netgear 提供，范围广泛，从完全托管的 L3 核心交换机到我们网络分支部分的智能交换机。 该网络的核心是 Netgear UTM150 防火墙，它管理传入和传出流量、跨多个 Internet 连接的负载平衡并提供对实验室的 VPN 访问。 对于 Internet 访问，我们通过 Cincinnati Bell 的 Fioptics 服务提供光纤连接。

互连硬件的下一步包括由 Mellanox 提供的 10Gb 和 40Gb 以太网，它们通过 SX1036 和 SX1024 交换机进行路由。 该结构用于测试 SMB 到大型企业 NAS 和 SAN 设备，这些设备需要的带宽很容易使标准 1GbE 接口过度饱和。 我们还增加了对使用 Netgear 最新交换机的 10GBase-T 设备的支持。

对于光纤通道 SAN 和存储设备，我们有两个 Brocade 6510 16Gb FC 交换机，主机服务器利用 Emulex 和 QLogic 16Gb HBA。

对于高性能吞吐量和对延迟敏感的应用，我们还拥有 56Gb Mellanox InfiniBand 架构，用于测试闪存设备，并作为新应用测试（例如我们的MarkLogic NoSQL 数据库基准测试）的骨干。

计算基础设施

StorageReview 企业测试实验室中的计算基础架构分为两个主要组——用于单系统基准测试的单个服务器和用于大规模应用程序的集群服务器。 我们有很多物理主机使用 Windows 和 Linux 操作系统，包括 Windows Server 2012 和 2012 R2，以及 CentOS 6.2、6.3 和 7.0。 在虚拟化方面，我们在实验室中广泛使用 VMware，在我们的测试环境中使用 ESXi 5.5 和 ESXi 6.0。 目前，我们基准测试中使用的每个平台都是 Intel Sandy Bridge 级或更新版本，提供完整的 PCIe 3.0 支持。

虽然我们有许多用于专门应用程序的无与伦比的服务器，但我们有大量匹配配置的服务器。 我们最新的集群包括 12 台配备双 E730-5 v2690 CPU 和 3GB DDR256 的 Dell PowerEdge R4 服务器。 我们还有一组 8 台配备双 E630-5 CPU 和 2690GB DDR128 的联想 RD3 服务器。 最后，我们有一个围绕 EchoStreams GridStreams 机箱构建的四节点集群，每个节点配置双 E5-2640 CPU 和 64GB DDR3。 这些用于集群数据库应用程序、大型虚拟化环境以及 VDI 测试。

随着实验室的成长和发展，我们一定会用最新的设备和更多关于我们如何使用它的细节来更新这篇文章。