StorageReview.com

Hammerspace Data System wprowadza na rynek OFP, 1U DPU Flash Tray o przepustowości 390 GB/s i pojemności do 9.83 PB

Enterprise   ◇  Pamięć masowa przedsiębiorstwa

Hammerspace przekształcił swoją programowalną platformę danych w Hammerspace Data System i po raz pierwszy będzie sprzedawać ją jako kompletny system ze sprzętem. Jej sercem jest Hammerspace Open Flash Platform (OFP), tacka 1U mieszcząca pięć węzłów flash opartych na DPU, bez serwera pamięci masowej x86, o wydajności 390 GB/s i 15 milionach IOPS na jednostkę rackową oraz do 9.83 PB pamięci w stanie surowym. Wprowadzenie na rynek platformy dodaje również warstwę inteligencji danych oraz funkcję pamięci podręcznej KV dla lokalnej pamięci NVMe GPU. OFP jest już dostępny w ofercie, a jego dostawa planowana jest na pierwszą połowę 2027 roku.

System danych Hammerspace w SC26: dwa węzły Hammerspace z fioletowymi siatkowymi ramkami nad tacką OFP 1U mieszczącą pięć sanek w markowej szafie

Od platformy danych do systemu danych

Głównym produktem Hammerspace jest równoległy globalny system plików, który oddziela metadane od ścieżki danych i prezentuje istniejące systemy NAS, obiekty i pamięć masową w chmurze jako jedną przestrzeń nazw w pNFS, NFS, SMB i S3. Klienci uzyskują do niego dostęp za pośrednictwem klienta NFSv4.2 wbudowanego w standardowe dystrybucje Linuksa, bez zastrzeżonego agenta, wykorzystując układ Flex Files, który Hammerspace, jak twierdzi, zaprojektował dla specyfikacji NFS. Firma opisuje system danych jako rozszerzenie tego oprogramowania, zorganizowane wokół pięciu funkcji: ujednolicenia danych, inteligencji, koordynacji, akceleracji i pamięci masowej, z których inteligencja i pamięć masowa są nowością.

Zmiana komercyjna polega na tym, że cały system można kupić od Hammerspace, a oprogramowanie, węzły metadanych i pamięć masowa są instalowane i obsługiwane przez firmę. Węzły metadanych, nazywane przez Hammerspace kowadłami, to serwery x86 1U w konfiguracjach Standard i Large M-Series z dwoma portami danych 100 GbE, wdrożone jako para o wysokiej dostępności w każdej lokalizacji, aby obsługiwać płaszczyznę sterowania, która zarządza przestrzenią nazw i realizuje zasady rozmieszczania. Kontynuowane są wdrożenia wyłącznie oprogramowania na sprzęcie klientów, podobnie jak węzły Hammerspace Ready Node od Dell, Supermicro i Hitachi Vantara oraz obrazy rynkowe w AWS, Azure, Google Cloud i Oracle Cloud.

Opcja systemowa nawiązuje do wzorca sprzedaży obserwowanego przez Hammerspace, gdzie oprogramowanie wygrywało ocenę techniczną, a klient i tak kupował zintegrowany produkt od innego dostawcy, aby ułatwić sobie zakup. Oprogramowanie jest licencjonowane w formie subskrypcji, a jego cena zależy od zarządzanej pojemności. Pamięć masowa Hammerspace jest zazwyczaj wdrażana, gdy nowy klaster GPU wymaga wydajnej pamięci masowej, a istniejące dane klienta znajdują się w systemach NetApp, PowerScale lub obiektowych, które przestrzeń nazw może przejąć na miejscu.

Klaster każdej lokalizacji łączy te kowadła z zestawem węzłów usług danych, a klastry łączą się w jeden globalny system plików. Metadane replikują się między lokalizacjami w sposób ciągły, z około sekundowym opóźnieniem między odległymi lokalizacjami, a same dane są przesyłane tylko wtedy, gdy wymaga tego polityka lub żądanie dostępu. Harmonogramy zadań mogą rozpocząć to przesyłanie za pośrednictwem interfejsu API i natywnych konektorów. Firma podała przykład klientów z branży nauk przyrodniczych, którzy pobierają dane z instrumentów przez SMB, przetwarzają je przez pNFS i udostępniają przez S3 z tego samego systemu.

Ewaluacje zazwyczaj mają charakter proof of concept, a obrazy chmurowe typu „przynieś własną licencję” stanowią rozwiązanie samoobsługowe. Pojemność dysków pochodzi z JBOD i serwerów pamięci masowej zbudowanych przez dostawców dysków twardych; OFP to projekt Hammerspace opracowany przez producenta kontraktowego, a systemy dostarczają resellerzy i partnerzy integracyjni. Macierz blokowa dołącza się do przestrzeni nazw tylko wtedy, gdy można ją zamontować przez NFS.

„Samo dodanie większej ilości pamięci masowej nie jest rozwiązaniem” – powiedział David Flynn, założyciel i prezes Hammerspace. Flynn określił to wydarzenie jako wprowadzenie konsolidacji danych, którą projekty fabryk oparte na sztucznej inteligencji wprowadziły do ​​obliczeń.

Wewnątrz platformy Open Flash

Każdy moduł OFP to kompletny węzeł pamięci masowej o szerokości jednej piątej jednostki rack, z ośmioma dyskami SSD U.2 lub U.3 NVMe w dwóch wymiennych pakietach po cztery dyski, dwoma portami 400 GbE QSFP-DD oraz 64-rdzeniowym procesorem DPU Arm zamiast płyty głównej x86. Moduł DPU to Xsight Labs E1, zbudowany w oparciu o proces technologiczny 5 nm firmy TSMC z 64 rdzeniami Arm Neoverse N2, dwoma 400 GB MAC, PCIe Gen5 i typowym poborem mocy 70 W. Działa pod kontrolą standardowego systemu Linux, a każdy moduł DPU jest widoczny w systemie plików Hammerspace jako serwer NFS.

Sanie OFP firmy Hammerspace bez pokrywy, na których widać jednostkę DPU firmy Xsight Labs, moduły pamięci DDR5 i klatkę portów sieciowych

Tacka 1U mieści od jednego do pięciu sanek, co pozwala na montaż do 40 dysków, 320 rdzeni ARM i dziesięciu portów 400 GbE na jednostkę rack. Hammerspace podaje moc maksymalną 360 W na sanki i 1,800 W na tackę z dwoma zasilaczami Titanium o mocy 2,160 W. Oferuje beznarzędziową obsługę sanek i pakietów dysków oraz protokoły IPMI i Redfish do zarządzania. Tacka ma głębokość 106.64 cm i wymaga stelaża o wysokości 1,200 mm, co wyklucza płytsze szafy klasy enterprise. Hammerspace podaje gęstość dysków 3.3 razy większą niż w typowym serwerze 2U z 24 wnękami NVMe, przy 160 dyskach SSD w obudowie 4U w porównaniu z 48.

Sanie OFP systemu danych Hammerspace na stole w SC26 z częściowo załadowanym pakietem czterech dysków i dwoma luźnymi dyskami SSD U.2 NVMe

Z ośmioma dyskami SSD QLC o pojemności 245.76 TB, co jest największą wartością oferowaną przez Hammerspace, oraz pojemnością dysków takich jak KIOXIA LC9 , sanki mieszczą 1.97 PB, a pełna tacka 9.83 PB. Przy maksymalnym obciążeniu tacy 1,800 W, daje to około 183 W na petabajt. Sanki obsługują dyski TLC lub QLC na PCIe Gen5 lub starsze, a Hammerspace pozycjonuje dyski TLC pod kątem wydajności, a QLC pod kątem pojemności. Szafa rack 42U wypełniona tackami pomieściłaby około 413 PB i pobierała do 75.6 kW.

Projekt nawiązuje do inicjatywy Open Flash Platform, którą Hammerspace rozpoczął w 2025 roku. Wśród uczestników znalazły się Xsight Labs i Los Alamos National Laboratory. W październiku 2025 roku Hammerspace poinformował, że systemy produkcyjne będą dostępne na początku 2026 roku, co oznacza, że ​​harmonogram został przesunięty o około rok. W saniach zastosowano dyski U.2 i U.3, ponieważ są one obecnie sprzedawane masowo, a Hammerspace zaprojektował projekt z myślą o gęstszych formatach. Hammerspace i Xsight opisali ścieżkę do eksabajta na szafę, ponad dwukrotnie więcej niż pełne 42U największych obecnie dysków.

Hammerspace poinformował, że prace nad prototypem sled rozpoczęły się około dwa lata temu, a wczesne wdrożenie nastąpiło dzięki hiperskalerom, które umieszczają jedną lub dwie tacki na górze każdej szafy GPU i szafie ekonomicznej, a gęstość wydajności jest wyższa niż oszczędność energii. W tym układzie Hammerspace mapuje NVMe wewnątrz serwerów GPU na oznaczenia NVIDIA G3, a tacka OFP wypełniona TLC w każdej szafie na G4.

Oświadczenia dotyczące wydajności i warunki testowania

Hammerspace ocenia przepustowość zapisu dla pięciosegmentowej tacy na 390 GB/s bez dublowania i 15 milionów losowych operacji odczytu IOPS dla 4 KB. Podane warunki to NFSv4.2 z pNFS przez TCP w sieci 400 GbE z dyskami SSD TLC Gen5 klasy enterprise. Odczyty są szacowane na maksymalnie 80 GB/s na sanki lub 400 GB/s na tackę. To około 40 GB/s przez każdy z dwóch portów 400 GbE tacy, co w zasadzie nasyca łącza po uwzględnieniu obciążenia protokołem, więc porty sieciowe wyznaczają limit przepustowości odczytu.

Radiator DPU z miedzianymi rurkami cieplnymi obok dysku SSD U.2 NVMe i pakietu czterech napędów wyjętych z sanek Hammerspace OFP

Ochrona odbywa się poprzez dublowanie, ustawiane dla każdego pliku lub katalogu zgodnie z polityką i modyfikowalne online. Prędkość zapisu spada do 195 GB/s na tackę w trybie dwukierunkowego dublowania i 130 GB/s w trybie trójkierunkowym, a dublowanie dwukierunkowe zmniejsza również o połowę pojemność użytkową, do około 4.9 PB na w pełni zapełnionej tacy QLC. Hammerspace sugeruje pracę bez dublowania danych, które można regenerować, takich jak pamięć podręczna KV. Firma deklaruje od dwóch do pięciu razy wyższą wydajność na jednostkę rack niż nienazwany, najbliższy konkurent. Nie opublikowała danych dotyczących opóźnień, liczby klientów ani wyników testów IO500 i MLPerf Storage dla OFP, a my nie przeprowadzaliśmy ani nie audytowaliśmy tych testów.

Specyfikacja Platforma Hammerspace Open Flash
Omówienie platformy
Architektura Węzły pamięci flash oparte na DPU bez serwera pamięci masowej x86
Sanki 8 dysków SSD U.2/U.3 NVMe w dwóch pakietach po 4 dyski
64-rdzeniowy procesor DPU Arm (Xsight Labs E1)
2 x 400GbE QSFP-DD
Taca 1U od 1 do 5 sań
Do 40 dysków SSD
Do 320 rdzeni ARM
Do 10 x 400GbE
Wsparcie Dysku Kwalifikowane dyski SSD U.2/U.3, PCIe Gen5 lub starsze
TLC czy QLC
Maksymalna pojemność surowa 1.97 PB na sanki
9.83 PB na tackę
Na podstawie dysków SSD QLC o pojemności 245.76 TB
protokoły NFSv4.2 z pNFS
Ochrona danych Kopiowanie lustrzane według zasad dla każdego pliku lub katalogu: brak, dwukierunkowe lub trójkierunkowe
Wydajność (dane Hammerspace, dyski SSD Gen5 TLC, 400 GbE, TCP)
Przepustowość odczytu 80 GB/s na sanki
400 GB/s na tackę
Przepustowość zapisu, bez kopii lustrzanej 78 GB/s na sanki
390 GB/s na tackę
Przepustowość zapisu, lustro 2-drożne 39 GB/s na sanki
195 GB/s na tackę
Przepustowość zapisu, lustro 3-drożne 26 GB/s na sanki
130 GB/s na tackę
Odczyt losowy 4K 3 miliony IOPS na sanki
15 milionów IOPS na tackę
Moc i Fizyczność
Maksymalna moc 360 W na sanki
1,800 W na tackę
Zasilacze Podwójne tytanowe 2,160 W na tackę
Form Factor Tacka 1U, głębokość 106.64 cm
Wymaga stojaka o szerokości 1,200 mm
Chłodzenie Powietrze, maksymalna temperatura wlotowa 40°C na poziomie morza
Zarząd IPMI, Czerwona ryba
Dostępność: Cytując teraz
Wysyłka w pierwszej połowie 2027 r.

Pamięć podręczna poziomu 0 i KV

Hammerspace pozycjonuje OFP jako poziom 1, za poziomem 0, który składa się z pamięci NVMe już znajdującej się w serwerach GPU, którą eksportuje przez NFS i agreguje we współdzieloną warstwę obejmującą cały klaster, bez klienta ani agenta na węzłach obliczeniowych. Dane zapisane w tej warstwie są dublowane w całym klastrze w celu zapewnienia bezpieczeństwa i przenoszone do innych warstw zgodnie z polityką. Hammerspace twierdzi, że powszechnym wzorcem jest lokalne zapisywanie punktów kontrolnych szkolenia i umożliwienie systemowi przenoszenia starszych do pamięci masowej obiektów. Hammerspace podaje 4.4-krotnie większą przepustowość sekwencyjną i o 56% niższe opóźnienie dla poziomu 0 w porównaniu z zewnętrzną pamięcią masową współdzieloną, bez publikowania konfiguracji testowej.

Rola pamięci podręcznej KV wykorzystuje tę samą warstwę, argumentując, że serwer inferencyjny, który może ponownie załadować obliczony kontekst konwersacji z współdzielonej pamięci masowej, nie musi ponownie obliczać tych tokenów na GPU. Hammerspace nie pełni funkcji menedżera pamięci podręcznej i prezentuje pulę pamięci NVMe warstwy 0, z OFP w tle, jako pamięć masową POSIX, z której może korzystać menedżer pamięci podręcznej oprogramowania inferencyjnego.

Inteligencja danych: katalog, DeepScan i zapytania w języku naturalnym

Warstwa analizy danych rozpoczyna się od katalogu, który indeksuje metadane plików i obiektów w każdym systemie pamięci masowej w przestrzeni nazw bez konieczności przenoszenia danych. Drugi poziom, DeepScan, otwiera pliki w celu wyszukania danych osobowych, finansowych i chronionych informacji zdrowotnych na żądanie lub według harmonogramu, a wyniki stają się wyszukiwalnymi tagami. Zapytania mogą być formułowane w języku naturalnym za pomocą wybranego przez klienta narzędzia LLM. Wyniki trafiają do istniejącego mechanizmu reguł, który Hammerspace nazywa celami, dzięki czemu administrator może znaleźć każdy plik oznaczony jako gotowy do szkolenia lub ograniczony do jednego kraju i ustawić regułę umieszczania dla tego zestawu.

Widok katalogu danych systemu danych Hammerspace z pojemnością według witryny, plikami według indeksu, dystrybucją typów zawartości, wzrostem indeksu i wiekiem pliku, pokazany wraz z przykładowymi danymi na stronie produktu Hammerspace

Cele to deklaratywne reguły przypisane do udziału, woluminu, katalogu lub pliku, takie jak przenoszenie danych bez zmian przez 30 dni lub przechowywanie trzech kopii w trzech lokalizacjach. Nowe automatyzacje uruchamiają je na podstawie warunków, takich jak progi pojemności, harmonogramy i zdarzenia, z krokiem podglądu przed zatwierdzeniem zmian. Tagi dziedziczą w dół drzewa katalogów i podążają za plikami między systemami pamięci masowej a chmurami. Oprogramowanie obejmuje magazyny plików i obiektów od dowolnego dostawcy i nie zarządza danymi strukturalnymi.

Automatyzacje Hammerspace wyświetlają reguły wyzwalające wraz z metrykami, harmonogramem i warunkami zdarzeń, pokazanymi na stronie produktu Hammerspace wraz z przykładowymi danymi

Wcześni klienci i perspektywy

Klientem referencyjnym na starcie jest kaiko, firma zajmująca się sztuczną inteligencją kliniczną z biurami w Amsterdamie i Zurychu, która trenuje modele na podstawie danych obrazowych i patologicznych. Kaiko uruchamia Hammerspace w chmurze Microsoft Azure oraz chmurach GPU Nebul i Nebius jako jednej przestrzeni nazw, wykorzystuje NVMe w węzłach GPU jako warstwę 0 do trenowania i ma punkty kontrolne umieszczone w usłudze Azure Blob Storage zgodnie z polityką. Hammerspace twierdzi, że wszystkie przepływy pracy inżynierii uczenia maszynowego firmy Kaiko w tych trzech klastrach zostały przeniesione do systemu. Studium przypadku nie dotyczy sprzętu OFP.

Hammerspace poinformował nas, że firma kaiko wdrożyła system, rozrastając się z około 128 procesorów graficznych do ponad 1,000 na platformie Nebius, a jej istniejący serwer NAS all-flash w chmurze Nebul został wdrożony do tej przestrzeni nazw. Firma opisała również anonimowe, hiperskalowalne laboratorium badawcze ds. sztucznej inteligencji, które zastąpiło Amazon FSx dla Lustre klastrem Hammerspace o pojemności 30 PB w AWS po roku, w którym Lustre było największym źródłem zgłoszeń do pomocy technicznej. Obecnie rozszerza przestrzeń nazw na lokalne centrum danych. Hammerspace podaje, że operacje na dużych plikach są tam około trzykrotnie szybsze.

OFP dołącza do innych projektów, które umieszczają DPU w miejscu procesora serwera pamięci masowej, w tym do referencyjnej architektury BlueField-4 STX, którą NVIDIA zaprezentowała na targach GTC. Wersja Hammerspace różni się tym, że łączy ją z systemem plików, który działa również bez sprzętu. Hammerspace prezentuje sprzęt na targach SC26 i nie opublikował jeszcze cen.

Nakręciliśmy film prezentujący przejście sanek OFP i tacy z Hammerspace w SC26. Dodamy ten film do tego artykułu po jego opublikowaniu.

System danych Hammerspace

Platforma Hammerspace Open Flash

Skontaktuj się z StorageReview

Biuletyn | YouTube | Podcast iTunes / Spotify | Instagram | Twitter | TikTok | Kanał RSS

Brian Beeler

Brian mieszka w Cincinnati w stanie Ohio i jest głównym analitykiem oraz prezesem StorageReview.com.