存儲評論網

CTERA Fusion Direct 針對 AI 驅動的工作負載,提供檔案和物件儲存解決方案

企業  ◇  企業存儲

CTERA 推出了 Fusion Direct,這是一種旨在彌合企業檔案系統和物件儲存之間長期存在的鴻溝的聯合資料架構。該產品擴展了 CTERA Fusion 系列(該系列已包含 CTERA Fusion Gateway),並定位為 CTERA 智慧資料平台的核心組件。其目標是提供一個單一的高效能資料架構,既能滿足以人為中心的文件工作負載需求,又能滿足機器驅動的 AI 管線需求,而無需重複資料或重構應用程式。

將文件和物件統一到一個命名空間下

企業 IT 團隊歷來被迫運作兩個獨立的儲存域。 NAS 系統提供 SMB 和 NFS 訪問,用於使用者協作以及傳統或業務線應用程式。物件儲存(通常透過 S3 存取)則用於大規模、雲端原生和分析工作負載。要連接這兩個環境,通常需要建立並行基礎設施,在它們之間複製數據,或依賴將檔案呼叫轉換為物件 API 的網關。這些轉換層可能會引入額外的延遲、複雜性和維運風險,尤其是在大規模部署的情況下。

CTERA Fusion Direct 圖

Fusion Direct 透過提供一個統一的全域命名空間來解決這個問題,在這個命名空間中,檔案和物件可以原生共存。資料可以以文件的形式寫入平台,並以物件的形式讀取;也可以以物件的形式寫入,並以檔案的形式讀取。該系統支援完整的雙向讀寫行為,無需將檔案轉換為專有物件區塊,也無需透過單獨的轉換網關路由存取。 CTERA 明確指出,不存在文件到物件的轉換瓶頸,也沒有任何專有的封裝方案。

從存取角度來看,現有企業應用程式和使用者仍像現在一樣透過 SMB 和 NFS 協定運作。同時,AI 訓練叢集、高效能運算環境和雲端原生服務可以透過 S3 和 S3 over RDMA 存取相同的資料集,後者旨在為 GPU 叢集和其他高效能運算環境提供線速吞吐量。

利用現有物件儲存和分散式邊緣運算

一個重要的設計亮點在於能夠將現有的 S3 儲存桶直接連接到 Fusion Direct 資料架構。企業無需將物件資料遷移或重新整合到新系統中,即可將目前的物件儲存命名空間作為全域檔案/物件空間的一部分呈現。連接後,這些儲存桶中的物件即可作為標準檔案在邊緣節點和多雲部署環境中存取。

這種方法讓 IT 團隊將物件資料以檔案的形式向全球使用者和應用程式公開,同時仍能以 S3 原生方式將其呈現給 AI 和分析工作負載。它還減少了在多個區域或邊緣站點部署重複基礎設施的需求,這些基礎設施原本用於暫存或重新格式化資料。最終效果是,對於跨多個地理位置的分散式資料集,儲存佔用空間更小。

面向人工智慧時代的效能架構

CTERA Fusion Direct 利用了 CTERA 現有的智慧數據平台堆棧,並獲得了美國專利 12,007,9521 的支援。此架構強調同時支援協作文件工作負載和高吞吐量、機器規模的資料消費。

一項核心功能是原生零拷貝存取。寫入 CTERA 平台的文件可立即作為標準 S3 物件訪問,無需任何二次複製或後台轉換。反之,S3 儲存桶可直接連接,其內容可立即作為全域命名空間中的檔案存取。此舉旨在避免因重複複製或中間快取而導致的延遲和儲存開銷。

高速文件流傳輸是另一個重點領域。大型媒體資源、訓練資料集和其他佔用大量儲存空間的內容可以直接從物件儲存串流傳輸到基於檔案的應用程式。這種方法無需大量本機下載或暫存步驟,從而避免了降低工作流程速度以及在邊緣或運算叢集中佔用額外儲存空間的問題。

在效能方面,Fusion Direct 以支援 S3 over RDMA 和 GPU 直接存取模式的方式公開原生物件。對於 AI 叢集而言,這意味著 GPU 可以從基於物件的資料集中以接近或達到線速的速度讀取和寫入數據,而無需在資料路徑中進行額外的協定轉換。這對於受 I/O 吞吐量而非原始運算能力限制的訓練和推理作業尤其重要。

CTERA 也特別強調了資料主權的重要性。由於數據儲存在標準的 S3 儲存桶中,沒有專有封裝或網關來管理元數據,因此組織可以跨本地部署和公共雲保持對其資訊的控制權。該架構旨在最大限度地減少資料層鎖定,並隨著基礎設施策略的演進保持靈活性。

打破人機數據孤島

CTERA 執行長 Oded Nagel 表示,企業採用人工智慧的主要障礙並非數據短缺,而是如何有效利用數據。他強調,將供人類使用的數據與機器分析的數據分開會造成摩擦。維護獨立的環境和資料集會減緩人工智慧的部署速度。 Nagel 建議將這些環境和資料集整合到一個支援 SMB/NFS 和 S3 over RDMA 的單一平台中,從而為企業提供從原始資料到可用於人工智慧的資料集的直接路徑。統一的平台可以幫助企業更好地利用數據,並在機器學習和自動化驅動的市場中保持競爭力。

庫存情況

CTERA Fusion Direct 現已作為 CTERA 智慧資料平台的一部分推出,並定位為更廣泛的 CTERA Fusion 系列產品的核心元件,用於檔案和物件統一。欲了解更多信息,請訪問CTERA 網站。

參與 StorageReview

電子報| YouTube | PodcastiTunes / Spotify | Instagram | Twitter | TikTok | RSS訂閱

哈羅德弗里茨

自 IBM 創建 Selectric 以來,我一直在科技行業工作。 不過,我的背景是寫作。 因此,我決定退出售前業務,回歸本源,從事一些寫作工作,但仍從事技術工作。