OCP Grand Canyon 存儲系統 – 動手實踐

14 年來，Meta 一直在一些最大的數據中心設計、構建和部署其硬件。 2009 年，隨著快速增長，工程師們被要求重新考慮他們的基礎設施，以支持數據、人員和資源的大規模內部增長，因為 Facebook 工程師開始設計一個具有軟件、服務器、硬件、冷卻系統的節能數據中心。 , 和電源。 他們現在將 Grand Canyon Storage System 作為大容量存儲的下一個標準貢獻給了 OCP。

與公司以前的設施相比，新設施的建造能效提高了 38%，運行成本降低了 24%。 Facebook 決定與全球工程界分享它的成功。 因此，在 2011 年，開放計算項目基金會 (OCP) 啟動，以加快網絡設備的創新步伐。 從通用服務器、GPU 服務器、存儲設備到機架設計，一切都源自 OCP 協作模型，並正在應用於數據中心以外的領域，幫助推動電信行業和邊緣基礎設施的發展。

因此，Meta 在 OCP 全球峰會上帶領與會者了解最新的存儲服務器和稱為 Grand Canyon 的 JBOD，以及稱為 Barton Springs 的新單路服務器是再合適不過的了。 Grand Canyon 的設計源於構建更好更快的存儲服務器的需求。

新服務器背後的動機基於以下幾點：

• 每個插槽的 CPU 性能更高
• 改進機箱以支持密集驅動器（最多 2025-2026 年左右的時間範圍）
• 電源效率
• 保持靈活性（ORv3，模塊化 CPU 卡）
• 採用壽命更長的組件設計

Grand Canyon 的設計增加了模塊化，以延長新底盤的可升級性和使用壽命。

元件	產品說明
中央處理器	英特爾至強“Cooper Lake”SoC
啟動驅動器	M.2 固態（2280 外形規格 超大規模 NVMe 引導 SSD 規範)
DIMM	每通道 1 個 DDR4 DIMM，4 個通道，最高 3200MT/s
PCH	Intel PCH芯片組

新的存儲服務器由兩個存儲節點組成，支持單個抽屜中的 36 x 3.5" HDD。 Grand Canyon 使用具有一些令人印象深刻的規格的 Barton Springs 單路服務器。 新底盤中加入了額外的靈活性，允許系統構建為三種配置。

第一個配置選項是獨立的雙存儲服務器，包括兩個計算節點和 72 個 HDD，其中所有驅動器始終處於開啟狀態，以實現更快的數據訪問。

第二種配置是具有單個計算節點的單個存儲服務器，該計算節點也​​可以用作頭節點。 此配置連接到兩個 JBOD 機箱，這是第三種配置，沒有計算節點，最多支持 216 個 HDD。

每種配置都有不同的系統模塊數量，如上面的分解圖所示。 這種設計的一個關鍵要素是從機箱的前部或頂部訪問所有組件是多麼容易。

大峽谷 vs. 布萊斯峽谷（上一代）

	布萊斯峽谷	大峽谷
計算	16核心	26核心
規格集成率	1	1.87（啟用渦輪增壓）
DRAM 容量，每個 CPU 的帶寬	2 個 32GB DDR4，33GB/秒	4 個 16GB DDR4，93GB/秒
每個計算啟動 SSD	GB 256	GB 256
每個計算的數據 SSD	2x2TB m.2	2x2TB E1.S 9.5mm（可升級容量
每個機箱的驅動器，每個計算的驅動器	72，36	72，36
NIC	50Gbps，單主機，OCP2.0	50Gbps，單主機，OCP 3.0（可升級至 100Gbps）

大峽谷存儲系統結構設計改進

由於此機箱中的 HDD 數量和風扇振動的可能性，Meta 改進了結構和聲學方面的減振功能，以允許採用密集的 HDD 容量並防止風扇振動傳遞到外殼。

Meta 工程師使用替代品來測量振動，並與硬盤驅動器供應商取得聯繫，以比較在設計 Grand Canyon 機箱時使用的減振措施的優勢。

風扇系統被修改為包括一個百葉窗，如果風扇關閉，該百葉窗將關閉，以防止整個系統的氣流損失。 這確保了整個機箱的適當冷卻，即使在風扇丟失的情況下也是如此。

Grand Canyon 系統採用 Broadcom 最新的 IOC 和擴充器，包括 SAS Gen4 功能，可與 SAS 和 SATA 硬碟互通，並為 SAS/SATA 硬碟的命令持續時間限制以及雙執行器硬碟提供硬體和韌體相容性。

支持文檔

有關為 Grand Canyon 特性分析而構建的替代硬碟的信息，請參閱此演講。

有關替代硬碟、改進和標準化的信息，請加入OCP 硬碟動態工作組。

有關 Meta 感興趣的功能的更多信息，請查看此處“未來會議的 HDD 功能”。

規範可在GitHub 儲存庫 (OpenBMC)上檢視。

Grand Canyon 系統可從 Wiwynn 獲得，在其產品指南中稱為 SV/ST7000G4。