ASRock Rack 4U36L6E-MILAN2/2T 是一款 4U 機架式服務器，支持兩個 AMD EPYC CPU、36 個 3.5 英寸托架（其中 4 個可與 NVMe SSD 一起使用）、兩個 2.5 英寸 NVMe 啟動驅動器托架和一對 M.板上有 2 個插槽，便於測量。 憑藉如此巨大的計算和存儲潛力，該服務器可以承擔各種角色，從傳統的高密度存儲服務器到混合用途的虛擬化盒。
我們最近與華擎機架（ASRock Rack）進行了多次合作，並對其新款中階SMB伺服器進行了深入評測。這款2U伺服器搭載英特爾至強可擴充處理器，採用12盤位機箱，並可選配NVMe硬碟位，提供了高度靈活的配置方案。如果說2U伺服器能夠滿足各種典型應用場景，那麼我們這次評測的4U AMD伺服器則將效能和密度提升到了新的高度。
4U36L6E-MILAN2/2T 擁有如此多的存儲空間和使用 NVMe SSD 加速工作負載的能力，將適合各種可能的用例。 服務提供商將從一開始就選擇填充所有這些托架，使用一些閃存來加速基於 HDD 的工作負載。 另一方面，數據足跡不斷增長的中小型企業可以開始部分填充，使用 NVMe 托架滿足高性能應用程序需求，並隨著業務需求的變化擴展存儲。 無論哪種方式，華擎 Rack 客戶都會欣賞此服務器提供的靈活性。
在我們的案例中，我們專注於使用 VMware ESXi 的虛擬化環境。 用戶可以輕鬆地利用 Hyper-V、Proxmox 或適合其環境的其他管理程序。 或者，完全放棄管理程序並利用軟件定義的解決方案（如 TrueNAS、OpenStack、OpenShift 或 Cloudian）來解決更具體的需求。 當您將 AMD EPYC Gen3 CPU 的計算潛力考慮在內時，任何這些選項的優勢都是巨大的，在某些配置中提供了 128 個內核。
華擎機架 4U36L6E-MILAN2/2T 硬件概述
憑藉其雙插槽 SP3 (LGA 4094) 設計，4U36L6E-MILAN2/2T 服務器支持 AMD EPYC 7003 和 7002 系列處理器和 8+8 DIMM 插槽，提供處理各種工作負載所需的處理能力。
雖然處理能力是必不可少的組成部分，但 4U36L6E-MILAN2/2T 的另一個主要亮點是其存儲容量。 該服務器正面配備 32 個熱插拔 3.5" SATA/SAS 驅動器托架，以及四個熱插拔 3.5" SATA/SAS 驅動器托架或 4 個熱插拔 2.5" NVMe (PCIe3.0 x4) 驅動器托架。 從背面看，有額外的 12 個熱插拔 3.5 英寸 SATA/SAS 驅動器托架和兩個熱插拔 2.5 英寸 NVMe 驅動器托架，內部還有一組額外的兩個 M.2 SSD 插槽。
進出數據需要良好的連接選項。 該服務器配備板載雙 10GbE Intel X550-AT2 NIC。 當然，如果需要，可以將額外的 NIC 添加到 PCIe 插槽。
在可擴展性方面，4U36L6E-MILAN2/2T 提供了多種選擇，這得益於六個薄型 PCIe 4.0 擴展插槽，允許企業根據需要添加額外的硬件。 雖然包含板載 10GbE，但這些插槽可用於 25/50/100/200GbE 接口、小型 GPU（如流行的 NVIDIA A2）或其他擴展設備，具體取決於所需的具體部署配置。 在可用的六個插槽中，一個用於 RAID 卡或 HBA，用於服務器的 SATA/SAS 連接。
對於遠程管理，華擎 Rack 包含一個基於 HTML5 的 WebGUI，用於監控服務器和執行維護功能。 佈局很直觀，尤其是對於在服務器上部署操作系統的第 0 天活動。
華擎機架 4U36L6E-MILAN2/2T 規格
| 系統 | |
| 外形 | 4U機架式 |
| 尺寸 | 699 x 432 x 176 mm（27.5“x 17”x 6.9“） |
| 主機板 | 羅馬2D16-2T |
| 前面板 | |
| 鈕扣 | 系統復位，電源 |
| 發光二極管 | 電源、LAN1 活動、LAN2 活動、系統故障、硬盤狀態 |
| I / O端口 | 2 A 型 (USB3.2 Gen1) |
| 外部驅動器托架/存儲 | |
| 前側托架 | 20 個熱插拔 3.5" SATA/SAS 驅動器托架* 4 個熱插拔 3.5" SATA/SAS 驅動器托架或 4 個熱插拔 2.5" NVMe (PCIe3.0 x4) 驅動器托架 *需要額外的 RAID/HBA 卡來支持 36 x 3.5″ SATA/SAS 驅動器 |
| 前背板 | 24口12Gbps有源背板，4口PCIe3.0背板 |
| 後側托架 | 12 個熱插拔 3.5” SATA/SAS 驅動器托架，2 個熱插拔 2.5” NVMe (PCIe3.0 x4) 驅動器托架 |
| 後背板 | 12口12Gbps有源背板，2口PCIe3.0背板 |
| 內部存儲 | 1個M-key (PCIe4.0 x4 or SATA 6Gb/s), 支持22110/2280/2242 form factor [CPU0] 1個M-key (PCIe4.0 x4), 支持22110/2280/2242 form factor [CPU0] |
| 電源供應 | |
| 類型 | 1+1冗餘CRPS |
| 輸出瓦數 | 800W @ 100-127Vac 輸入 / 1200W @ 200-240Vac 輸入 |
| 效率 | 80-PLUS 鉑金級 |
| 系統風扇 | |
| Fan | 7 個熱插拔 80x38mm 風扇 |
| 處理器系統 | |
| 中央處理器 | 支持 AMD EPYC 7003 /7002 系列處理器 |
| 插座 | 雙路 SP3 (LGA 4094) |
| 熱設計功率 | 最高為205W |
| 芯片組 | 片上系統 |
| 系統內存 | |
| 支持的 DIMM 數量 | 8+8個DDR4 288針DIMM插槽(1DPC) |
| 支持類型 | DDR4 288 針 RDIMM、LRDIMM |
| 最大限度。 每個 DIMM 的容量 | RDIMM：高達 64GB，LRDIMM：高達 256GB |
| 最大限度。 內存頻率 | RDIMM/ LRDIMM：高達 3200 MHz |
| 電壓 | 1.2V |
| PCIe擴展槽（SLOT7靠近CPU） | |
| PCIe x 16 | 插槽 6：薄型 PCIe 4.0 x16 [CPU1] 插槽 5：薄型 PCIe 4.0 x16 [CPU0] 插槽 4：薄型 PCIe 4.0 x16 [CPU1] 插槽 3：薄型 PCIe 4.0 x16 [CPU0] 插槽 1：薄型 PCIe 4.0 x16 [CPU0] |
| PCIe x 8 | 插槽 2：薄型 PCIe 4.0 x8 [CPU1] |
| 伺服器管理 | |
| 基板管理控制器 | ASPEED AST2500：支持 iKVM 和 vMedia 的 IPMI2.0 |
| 後端I / O | |
| UID 按鈕/LED | 1 個帶 LED 的 UID |
| VGA端口 | 1 個 DB15（顯卡） |
| USB 3.2 Gen1端口 | 2 A 型 (USB3.2 Gen1) |
| RJ45 | 2 個 RJ45 (10GbE)，英特爾 X550-AT2 1 x Realtek RTL8211E 用於專用管理 GLAN |
| 系統BIOS | |
| BIOS 類型 | 32MB AMI UEFI BIOS |
| BIOS 功能 | 即插即用 (PnP)、ACPI 6.3 合規喚醒事件、SMBIOS 3.3.0、ASRock Rack Instant Flash |
| 硬件監視器 | |
| 溫度因素 | CPU、MB、卡面、X550溫度感應 |
| Fan | 風扇轉速表 CPU靜音風扇（允許機箱風扇速度根據CPU溫度自動調整） 風扇多段速控制 |
| 電壓 | Vsoc，Vcpu，VCCM，+3V，+5V，+12V，BAT，+1.8VSB，+3VSB，+5VSB |
| 環境 | |
| 溫度因素 | 工作溫度：10°C ~ 35°C / 非工作溫度：-40°C ~ 70°C |
華擎機架 4U36L6E-MILAN2/2T 虛擬化測試
我們將 ASRock Rack 4U36L6E-MILAN2/2T 配置為 VMware ESXi 主機，以說明運行容量和 I/O 密集型工作負載。 我們安裝了 20 個 22TB HDD，分成兩個池和四個 7.68TB Solidigm P5520 NVMe SSD 來單獨運行工作負載。
然後，我們將四個 SQL Server VM、八個 MySQL Sysbench VM 和 16 個存儲負載生成 VM 遷移到服務器上以測量系統性能。 這些工作負載顯示了平台的 I/O 和 CPU 潛力，以及硬盤驅動器 RAID 組的存儲容量優勢。
華擎機架4U36L6E-MILAN2/2T測試配置
- 2 個 AMD EPYC 7763 64 核 CPU
- 256GB DDR4
- 8 個 22TB WD 金盤
- 12 個 22TB WD 紅色專業版
- 4 個 7.68TB Solidigm P5520
- 博通 9460-16i
- VMware ESXi 7.0.3
SQL Server 性能
每個 SQL Server VM 都配置有兩個虛擬磁盤：一個 100GB 的引導捲和一個 500GB 的數據庫和日誌文件卷。 從系統資源的角度來看，我們為每個 VM 配置了八個 vCPU 和 64GB DRAM，並利用了 LSI Logic SAS SCSI 控制器。 雖然我們之前測試的 Sysbench 工作負載在存儲 I/O 和容量方面使平台飽和，但 SQL 測試尋找延遲性能。
此測試使用執行在 Windows Server 2012 R2 用戶虛擬機器上的 SQL Server 2014，並由 Quest 的資料庫基準測試工具進行壓力測試。 StorageReview 的Microsoft SQL Server OLTP 測試協定採用交易處理效能委員會 (TPPC) 基準測試 C (TPC-C) 的最新草案。此線上事務處理基準測試模擬了複雜應用程式環境中的活動。與合成效能基準測試相比，TPC-C 基準測試更能準確評估資料庫環境中儲存基礎架構的效能優勢和瓶頸。本次評測中使用的每個 SQL Server 虛擬機器執行個體均使用 333GB（1,500 規模）的 SQL Server 資料庫，並在 15,000 個虛擬使用者的負載下測量交易效能和延遲。
SQL Server 測試配置（每個虛擬機）
- 在Windows Server 2012 R2
- 存儲空間：分配 600GB，使用 500GB
- SQL Server 2014的
- 數據庫大小：1,500 規模
- 虛擬客戶端負載：15,000
- 內存緩衝區：48GB
- 測試時長：3 小時
- 2.5 小時預處理
- 30分鐘採樣期
我們將四個 SQL Server VM 放置在 ASRock Rack 4U36L6E-MILAN2/2T 上，每個 VM 都位於專用的 SSD 上。 在此測試中，服務器在跟上需求方面沒有問題，並且每個 VM 的延遲為 1 毫秒，從而達到了測試極限。
系統性能
下一個應用基準測試是使用SysBench 對Percona MySQL OLTP 資料庫進行測量。此測試還會測量平均 TPS（每秒交易數）、平均延遲和平均第 99 個百分位延遲。
每個Sysbench虛擬機器都配置了三個虛擬磁碟：一個用於啟動（約 92GB），一個用於預先建置的資料庫（約 447GB），第三個用於待測資料庫（270GB）。從系統資源角度來看，我們為每個虛擬機器配置了八個虛擬 CPU 和 60GB DRAM，並使用了 LSI Logic SAS SCSI 控制器。
Sysbench 測試配置（每個虛擬機）
- 中央操作系統 6.3 64 位
- Percona XtraDB 5.5.30-rel30.1
- 數據庫表：100
- 數據庫大小：10,000,000
- 數據庫線程：32
- 內存緩衝區：24GB
- 測試時長：3 小時
- 2 小時預處理 32 個線程
- 1 小時 32 個線程
對於我們的 Sysbench 測試，我們使用了八個虛擬機，每個 SSD VMware 數據存儲上有兩個虛擬機。 有了這 23,800 個 VM 負載，我們可以擴展到 2,975TPS，平均每個 VM XNUMXTPS。
我們測得 Sysbench VM 組的平均延遲在 10.65 毫秒到 10.85 毫秒之間。
在 Sysbench 99VM 組中測量第 8 個百分位數的延遲，總平均值為 20.45 毫秒。
VDBench 工作負載分析
我們在 VMware ESXi 環境中使用 VDbench 來展示共享公共數據存儲的多個 VM 之間的存儲所獲得的性能。 該測試利用了一組 16 個存儲負載生成虛擬機，這些虛擬機是為測試虛擬化環境中的共享存儲而構建的。 然後為每個虛擬機配置兩個 125GB 的 vmdk，總計 4TB 的存儲空間。 當我們查看此服務器中的兩種類型的存儲時，我們將重點放在兩個 HDD 池中的更高容量存儲和四個 7.68TB NVMe SSD 提供的高性能存儲上。 我們使用兩個 RAID6 池進行 HDD 測試，並啟用了預讀和回寫。
簡介：
- 2048K 順序：100% 讀取，100% 寫入，四個線程，0-120% iorate
- 64K 順序：100% 讀取，100% 寫入 32 個線程，0-120% iorate
- 4K 隨機：100% 讀取，100% 寫入 128 個線程，0-120% iorate
在我們的 ESXi 環境中運行的 16 個 Vdbench 來賓虛擬機中，我們首先查看總體上看到的 2048k 順序傳輸性能。 在這裡，我們測量到寫入工作負載的峰值為 2,176MB/s。
切換到傳輸大小為 2048k 的讀取工作負載，我們測得的總速度為 2,064MB/s。
接下來，我們轉向具有較小 64K 順序傳輸工作負載的 NVMe SSD。 在我們測量寫入速度的第一個測試中，我們測量到 13.4GB/s 的峰值。
切換到讀取帶寬，我們測得峰值為 14GB/s。
我們最後的測試部分側重於隨機 4K 傳輸速度，首先是寫入性能。 在我們的 16 個虛擬機中，我們測量了 4k IOPS 的總 694K 寫入速度。
切換到 4K 隨機讀取，我們測量到 745k IOPS 的峰值。
總的來說，這只是顯示華擎機架 4U36L6E-MILAN2/2T 作為 VMware ESXi 主機的性能潛力的一個場景。 然而，這個平台可以運行許多不同的操作系統和配置。
最後的思考
華擎 Rack 4U36L6E-MILAN2/2T 是一款功能強大且用途廣泛的高密度存儲服務器，適用於各種應用，包括虛擬化、軟件定義存儲和傳統高密度存儲。 它具有雙 AMD EPYC CPU 並支持多達 36 個 3.5 英寸驅動器，包括四個 NVMe SSD、兩個 2.5 英寸 NVMe 啟動驅動器托架和主板上的一對 M.2 插槽。
憑藉其高存儲容量和使用 NVMe SSD 加速工作負載的能力，4U36L6E-MILAN2/2T 非常適合數據存儲需求不斷增長的服務提供商和中小型企業。 它還提供六個薄型 PCIe 4.0 擴展插槽、雙 10GbE Intel X550-AT2 NIC 和用於遠程管理的基於 HTML5 的 WebGUI。
從性能的角度來看，華擎 Rack 4U36L6E-MILAN2/2T 有不少亮點。 它將高密度盤片存儲與雙插槽 AMD EPYC Gen3 處理器相結合，並配備多達六個 Gen4 NVMe U.2 托架。 在我們的虛擬化測試中，我們發現該平台可以毫不費力地跟上任務數據庫工作負載，在 Sysbench 中提供略低於 24k TPS 的性能，並且毫不費力地在每個實例中以 1 毫秒的速度將我們的 SQL Server 工作負載最大化。 這是通過僅利用四個 NVMe 托架完成的，同時留下 32 個 3.5 英寸托架可用於高容量硬盤驅動器。
對於大型數據集的分析工作，該平台有可能在內部運行任務工作負載並訪問大型數據集，而無需從外部共享存儲平台提取數據。 如果您想將這個盒子發揮到極致，您可以將 704TB 的旋轉介質裝入服務器，同時仍然為大量 NVMe 閃存留出空間。
總的來說，華擎 Rack 4U36L6E-MILAN2/2T 是那些希望最大化存儲容量並兼顧性能的用戶的絕佳選擇。 我們對在該系統中使用 NVMe 感到非常滿意； 可以訪問六個 U.2 SSD 擴展了軟件定義系統中加速 HDD 工作負載的選項。
請造訪華擎官網查看 4U36L6E-MILAN2/2T 機架的相關資訊。如需了解價格和供貨情況，請聯絡華擎機架銷售團隊，信箱為ASRockRack_sales@asrockrack.com。
本報告由 ASRock Rack 贊助。 本報告中表達的所有觀點和意見均基於我們對所考慮產品的公正看法。
Amazon