Mangstor NX6325 NVMf アレイのレビュー

by StorageReview エンタープライズラボ on 2016 年 8 月 28 日

Mangstor NX6325 NVMe Over Fabrics (NVMf) 共有ストレージアレイは、HP DL380 2U サーバーで最大 21.6TB のフラッシュストレージを提供します。今年初めにレビューした NX6320と同様に、NX6325 は Mangstor のアドインカード (AIC) NVMe ドライブを集約し、ネットワーク経由で共有します。これにより、レイテンシに敏感なアプリケーションは、すべてのサーバーに AIC を搭載する必要なく、NVMe ストレージの優れた利点をすべて活用できます。Mellanox SN2700 100GbE スイッチと ConnectX4 (Ethernet または InfiniBand) と組み合わせると、NX6325 は優れた機能を発揮し、単一のアレイから 12GB/s の読み取りパフォーマンスと 9GB/s の書き込みパフォーマンスを実現します。

ストレージのオーケストレーションを担うのは、MangstorのTITANソフトウェアです。NX6320でTITANの初期バージョンを確認しましたが、Mangstorは今月初めにこのソフトウェアを一般提供開始しました。TITANの中核となるのは、NVMe SSDとRDMA（Remote Direct Memory Access）ネットワークインターフェイスカード（NIC）を緊密に統合しつつ、HPEサーバーの機能を効率的に活用することです。TITANを使用すると、IT管理者はフラッシュストレージをローカルまたはリモートで動的にプロビジョニングし、一元管理を行うことができます。ストレージキャッシュやクラスタ管理などの機能も備えており、TITANはREST APIとGUIツールを提供することで、IT管理者が大規模なNVMe SSDクラスタを容易に展開および管理できるようにします。

Mangstor は、イーサネットまたは InfiniBand 用に構成された 10.8 つの容量オプションを提供します。購入者は、2.7 TB ドライブ 21.6 台で構成された 5.4 TB システム、または 10.8 TB ドライブ XNUMX 台で構成された XNUMX TB システムから選択できます。私たちのレビューシステムは XNUMXTB イーサネット構成です。

Mangstor NX6325の仕様

フラッシュストレージアレイ
- イーサネット
  - NX6325R-016TF-2P100GQSF、10.8TB (4TB SSD x 2.7)
  - NX6325R-032TF-2P100GQSF、21.6TB (4TB SSD x 5.4)
- - NX6325I-016TF-2P100GQSF、10.8TB (4TB SSD x 2.7)
  - NX6325I-032TF-2P100GQSF、21.6TB (4 x 5.4TB SSD)
帯域幅 Rd/Wr (GB/秒): 12.0 / 9.0
スループット Rd/Wr (4K) (IOPS): 3.0M / 2.25M
出力
- 450W標準
- 最大ピーク電力 800W
I / O接続
- 2x100Gb/s QSFP イーサネット
- 2x100Gb/秒 QSFP インフィニバンド
読み取り/書き込み遅延: 110μS / 30μS
アプライアンスの属性
- 2U ラックマウント (高さ x 幅 x 奥行き): 3.44 x 17.54 x 26.75 インチ (8.73 x 44.55 x 67.94 cm)
- 供給電圧: 100 ～ 240 VAC、50/60 Hz – 800W 冗長電源
- 熱放散 (BTU/時): 3207 BTU/時 (AC 100 V 時)、3071 BTU/時 (AC 200 V 時)、3112 BTU/時 (AC 240 V 時)
- 最大突入電流：30A（持続時間10ms）
- 概算重量: フル装備時 51.5 ポンド (23.6 kg)
環境
- 標準動作サポート: 海抜 10° ～ 35°C (50° ～ 95°F)、海抜 1.0 m ごとに 305°C (1.8 フィートごとに 1000°F) の高度低下、最大 3050 m (10,000 フィート)
- 湿度: 非動作時 5 ～ 95% 相対湿度 (Rh)、最大湿球温度 38.7°C (101.7°F)、結露しないこと
ファブリックプロトコルのサポート: RDMA over Converged Ethernet (RoCE)、InfniBand、iWARP
クライアント OS サポート: RHEL、SLES、CentOS、Ubuntu、Windows、VMware ESXi 6.0 (VMDirectPath)
運用管理: CLI、RESTful API、OpenStack Cinder
アレイと SSD の保証: ハードウェアは 5 年。基本ソフトウェア 90 日
ソフトウェア保証: 1 年間、3 年間、5 年間のゴールドまたはプラチナレベルのサービスおよびサポートオプションでカバーされます。

ビルドとデザイン

以前にレビューした NX6320 アレイでは、Mangstor は Dell R730 ベースのプラットフォームを活用しました。今回、NX6325 では HPE ProLiant DL380 Gen9 を使用しています。表面的にはこの動きは「似たようなもの」に見えますが、この変更は 100Gb イーサネットまたはインフィニバンドの導入を希望する顧客にとって重要であり、ストレージの可能性を最大限に高めます。 Dell R730 は 7 つの PCIe 3.0 スロットを提供します。 16 つはフルハイト x8、380 つはハーフハイト x9。 HPE DL6 Gen3.0 には PCIe 16 拡張スロットが XNUMX つしかありませんが、適切な PCIe ライザーキットを使用すると、XNUMX つのフルハイト xXNUMX スロットを備えた構成を作成できます。

Mangstor が提供するカードはフルハイト PCIe SSD であり、100GbE Mellanox ConnectX-4 NIC は x16 スロットであるため、この違いは重要です。 Dell 構成では、100GbE カードに適合させるために 4 つの PCIe SSD を取り外す必要がありますが、HPE 構成では、ユーザーはシステムに 100 つの PCIe SSD と 40 つの 56GbE NIC を同時に装備できます。これは、どのサーバーが他のサーバーよりも優れているかという議論ではなく、このかなりユニークなカードの組み合わせでどのサーバーがよりよく機能するかについての分析です。 Mangstor 氏は、6320Gb イーサネットまたは 6325Gb Infiniband の使用を希望する顧客に対して、NX100 と NX6325 の両方の製品が同等の機能とパフォーマンスを提供すると指摘します。このレビューでは XNUMXGb イーサネットをテストしているため、NXXNUMX が正しい選択です。

システムベンチのパフォーマンス

各Sysbench VM は、3 つの vDisk で構成されています。1 つはブート用 (約 92 GB)、1 つは構築済みのデータベース用 (約 447 GB)、3 つ目はテスト対象のデータベース用 (307 GB) です。LUN は使用可能なストレージ (11 TB) の 90% を均等に分割し、データベース (253 GB) を適切に収容します。システムリソースの観点から、各 VM には 16 個の vCPU、60 GB の DRAM を構成し、LSI Logic SAS SCSI コントローラを活用しました。負荷生成システムはDell R730 サーバーで、このレビューでは 4 台から 8 台のサーバーを使用し、4 VM グループごとにサーバーをスケーリングします。

Dell PowerEdge R730 8 ノードクラスタの仕様

Dell PowerEdge R730 サーバー (x8)
CPU: 5 基の Intel Xeon E2690-3 v2.6 12GHz (24C/XNUMXT)
メモリ: 128 x 16GB DDR4 RDIMM
メラノックス ConnectX-4 LX
VMwareのESXiの6.0

Mangstor NX6320 の前回のレビューでは、Mellanox ConnectX-3 カードと OFED ESXi 6.0 ドライバーを活用し、各 VM に 6325 枚のカードが割り当てられました (規模を手持ちの NIC の数に制限しました)。 Mellanox ConnectX-4 LX カードと最新の SRIOV ドライバーを備えた NX4 の現在の反復により、複数の仮想アダプターを最大 32 つの VM で同時に共有できるようになりました。サーバーごとに XNUMX 枚のカードを割り当て、この構成を使用して、合計 XNUMX 個の VM のテストまでスケールアップできるようにしました。

32 台の VM の全負荷では、各サーバーの CPU 使用率は約 86% で横ばいになりました。

Sysbench テスト構成 (VM ごと)

CentOS 6.3 64 ビット
ストレージ占有面積: 1TB、800GB 使用
Percona XtraDB 5.5.30-rel30.1
- データベーステーブル: 100
- データベースのサイズ: 10,000,000
- データベーススレッド: 32
- RAMバッファ: 24GB
テスト時間: 3 時間
- 2 スレッドのプリコンディショニングに 32 時間
- 1時間 32スレッド

Sysbench OLTP テストでは、アレイを 4VM の小さな負荷から 32VM の完全な飽和点まで測定しました。 Mangstor NX6325 はいくつかの印象的な記録を達成しました。まず、ローカルに接続されたフラッシュを使用しない Sysbench で最速のパフォーマンスを提供し、これまでにテストした他のものと比較して、基準を 6325 倍以上引き上げました。 NX38,673 は 17,316 TPS で最高に達しましたが、最新のフラッシュ共有ストレージソリューションのこれまでの記録保持者は「わずか」 XNUMX TPS でした。

レイテンシーを見ると、NX6325 は負荷がかかっても非常にうまく対処し、全体のトランザクションレイテンシーを 14.3VM で 4 ミリ秒、26.6VM で 32 ミリ秒の範囲に維持していることがわかります。つまり、負荷が 8 倍に増加しても、レイテンシーは XNUMX 倍にもなりませんでした。

99 パーセンタイル値でフリンジレイテンシーを確認すると、Mangstor NX6325 は負荷がかかっても非常にうまく処理できました。全体的な負荷が増加するにつれて値がゆっくりと増加することがわかりましたが、劇的に増加するものはありませんでした。

結論

Mangstor NX6325 NVMe Over Fabrics (NVMf) 共有ストレージアレイは、非常に高速な NVMe ストレージをアプリケーションサーバーから取り出し、サーバーのクラスタ全体で利用できるボックスに入れることを可能にする、最初の市販システムの 6325 つです。。この場合、私たちがレビューしている NX10.8 は、Mellanox SN380 9GbE スイッチと ConnectX2700 LX アダプターカードで構成されるファブリック上で、HPE ProLiant DL100 Gen4 に最大 XNUMX TB の NVMe ストレージを提供します。最終的には、これまでラボに投入された中で最速の共有ストレージとなるまでに非常に高速なパッケージが完成しました。公平を期すために、これはこれまでに見てきた他の高速なもの（より伝統的なオールフラッシュ SAN など）と直接比較することはできません。そのため、いくつかの点を明確にする必要があります。

NVMf は、実行という点ではまだ非常に若い概念です。 Mangstor に関しては、その道はかなり進んでおり、非常に遅延に敏感なアプリケーションにとっては驚異的な結果が得られます。あらゆる場所で SAN テクノロジーを置き換えるには、まだいくつかの点を成熟させる必要がありますが、主要なワークロードにとっては素晴らしいオプションです。他の NVMf ソリューションと比較して、Mangstor はファブリックに既存のイーサネットまたは IB を活用しており、カスタマイズされたハードウェアを使用するソリューションよりも互換性が高くなります。このアレイでのストレージの提供方法では、PCIe SSD の障害からの保護が提供されないことに注意することも重要です。アレイは、最高のパフォーマンスと容量を実現するために RAID0 で構成されています。このようなシステムに対応できるアプリケーションはいくつかありますが、従来のワークロードの場合、このアレイは「万能」ではないことを強調しなければなりません。

Sysbench OLTP テストのパフォーマンスを見ると、驚異的な数値が得られました。 4VM では、合計 TPS は、ほとんどのアレイが提供する合計値、またはローカルに接続された NVMe フラッシュが提供するものよりも高かった。 VM の数を増やしてワークロードを増加させると、総パフォーマンスが上昇し続け、最終的には最も近いフラッシュ共有ストレージソリューションを 6325 倍以上上回りました。現時点での私たちの環境の主な欠点は、ドライバーのサポートにより、VMware 共有データストアとして使用できないことです。これには、VM の移行 (仮想ネットワークデバイスに関連付けられる) や、現在 Linux を中心とするゲスト OS のサポートなど、いくつかの課題が生じます。ただし、これらの制限を回避できるユーザーにとって、Mangstor NXXNUMX は、競合するソリューションがたとえあったとしても、ほとんど達成できないパフォーマンスレベルへの扉を開きます。

メリット