StorageReview.com

Hammerspace Data System spouští OFP, 1U DPU Flash Tray s rychlostí 390 GB/s a kapacitou až 9.83 PB

Enterprise  ◇  Podnikové úložiště

Společnost Hammerspace proměnila svou softwarově definovanou datovou platformu (SDP) v Hammerspace Data System a poprvé ji bude prodávat jako kompletní systém s hardwarem. Ústředním bodem je platforma Hammerspace Open Flash Platform (OFP), což je 1U zásuvka, která pojme pět flash uzlů založených na DPU bez úložného serveru x86. Společnost uvádí rychlost zápisu 390 GB/s a 15 milionů IOPS na rackovou jednotku a až 9.83 PB raw dat. Součástí dodávky je také vrstva datové inteligence a role KV cache pro NVMe s lokální GPU. OFP je nyní k dispozici pro cenovou nabídku a dodání bude zahájeno v první polovině roku 2027.

Datový systém Hammerspace na konferenci SC26: dva uzly Hammerspace s fialovými síťovanými rámečky nad 1U přihrádkou OFP s pěti sledy ve značkovém racku

Od datové platformy k datovému systému

Hlavním produktem společnosti Hammerspace je paralelní globální souborový systém, který odděluje metadata od datové cesty a prezentuje stávající NAS, objektové a cloudové úložiště jako jeden jmenný prostor přes pNFS, NFS, SMB a S3. Klienti k němu přistupují prostřednictvím klienta NFSv4.2 zabudovaného do standardních linuxových distribucí, bez proprietárního agenta, s využitím rozvržení Flex Files, které Hammerspace tvrdí, že vyvinul pro specifikaci NFS. Společnost popisuje Data System jako rozšíření tohoto softwaru, organizované kolem pěti funkcí: sjednocení dat, inteligence, orchestrace, akcelerace a ukládání dat, z nichž inteligence a ukládání jsou novinkou.

Komerční změnou je, že celý systém lze zakoupit od společnosti Hammerspace, a to včetně softwaru, uzlů metadat a úložiště, které společnost instaluje a podporuje. Uzly metadat, které Hammerspace nazývá Anvils, jsou 1U servery x86 v konfiguracích Standard a Large M-Series se dvěma datovými porty 100GbE, nasazené jako vysoce dostupný pár na každém pracovišti pro provoz řídicí roviny, která spravuje jmenný prostor a provádí zásady umístění. Na zákaznickém hardwaru pokračuje pouze softwarové nasazení, stejně jako uzly Hammerspace Ready od společností Dell, Supermicro a Hitachi Vantara a obrazy z tržiště na AWS, Azure, Google Cloud a Oracle Cloud.

Systémová varianta reaguje na trend, který Hammerspace pozoroval v prodejích, kdy software vyhrál technické hodnocení, ale zákazník si i tak koupil integrovaný produkt od jiného dodavatele pro jednodušší nákup. Software je licencován jako předplatné s cenou stanovenou podle spravované kapacity. Úložiště Hammerspace se obvykle používá, když nový cluster GPU potřebuje vysoce výkonné úložiště, zatímco stávající data zákazníka jsou uložena v systémech NetApp, PowerScale nebo objektových systémech, které může daný jmenný prostor převzít.

Cluster každého pracoviště spáruje tyto Anvily se sadou uzlů datových služeb a clustery se spojují do jednoho globálního souborového systému. Metadata se mezi pracovišti replikují nepřetržitě, s přibližně sekundovým zpožděním mezi vzdálenými místy, zatímco samotná data se přesouvají pouze tehdy, když to vyžaduje zásada nebo požadavek na přístup. Plánovače úloh mohou tento přesun spustit prostřednictvím API a nativních konektorů. Společnost uvedla příklad zákazníků z oblasti biologických věd, kteří přijímají data z přístrojů přes SMB, zpracovávají je přes pNFS a poskytují je přes S3 ze stejného systému.

Evaluace obvykle probíhají jako ověření konceptu, přičemž cloudové obrazy s vlastní licencí jsou samoobslužnou cestou. Kapacita disku pochází z JBODů a úložných serverů vyrobených dodavateli pevných disků; OFP je design Hammerspace vytvořený smluvním výrobcem a systémy dodávají prodejci a integrační partneři. Blokové pole se připojuje k jmennému prostoru pouze tehdy, když jej lze připojit přes NFS.

„Pouhé přidání dalšího úložiště není řešením,“ řekl David Flynn, zakladatel a generální ředitel společnosti Hammerspace. Flynn toto spuštění označil za přinášení konsolidace, kterou návrhy továren umělé inteligence přinesly do výpočetní techniky, do oblasti dat.

Uvnitř platformy Open Flash

Každý OFP sled je kompletní úložný uzel o šířce jedné pětiny rackové jednotky s osmi U.2 nebo U.3 NVMe SSD disky ve dvou vyměnitelných čtyřdiskových balíčcích, dvěma 400GbE QSFP-DD porty a 64jádrovým Arm DPU místo základní desky x86. DPU je Xsight Labs E1, který Xsight staví na 5nm procesu TSMC s 64 jádry Arm Neoverse N2, dvěma 400G MAC kartami, PCIe Gen5 a typickým příkonem 70 W. Běží na standardním Linuxu a každý sled se v souborovém systému Hammerspace jeví jako NFS server.

Hammerspace OFP sled bez krytu, zobrazující Xsight Labs DPU, paměťové moduly DDR5 a síťový port cage

1U zásuvka pojme jeden až pět sledů, až pro 40 disků, 320 jader Arm a deset portů 400GbE na rackovou jednotku. Hammerspace uvádí maximálně 360 W na sled a 1 800 W na zásuvku s duálními 2 160W napájecími zdroji Titanium, s beznástrojovou obsluhou sledů a sad disků a IPMI a Redfish pro správu. Zásobník má hloubku 106.64 cm a vyžaduje 1 200mm rack, což vylučuje mělčí podnikové skříně. Hammerspace uvádí hustotu disků na 3.3krát vyšší než u typického 2U, 24šachtového NVMe serveru, a to 160 SSD disků ve 4U oproti 48.

Hammerspace Data System OFP sedí na stole v SC26 s částečně nabitým čtyřdiskovým balíčkem a dvěma volnými U.2 NVMe SSD disky

S osmi 245.76TB QLC SSD disky, největšími disky na trhu od Hammerspace a kapacitou disků, jako je KIOXIA LC9 , pojme jeden rackový modul 1.97 PB dat v surovém stavu a plný rackový modul 9.83 PB. Při maximálním výkonu rackového modulu 1 800 W je to přibližně 183 W na petabajt dat v surovém stavu. Racky přijímají disky TLC nebo QLC s rozhraním PCIe Gen5 nebo starším a Hammerspace upřednostňuje TLC pro výkon a QLC pro kapacitu. 42U rack naplněný rackovými moduly by pojal přibližně 413 PB a spotřeboval by až 75.6 kW.

Návrh navazuje na iniciativu Open Flash Platform, kterou společnost Hammerspace zahájila v roce 2025, přičemž mezi jmenovanými účastníky byly Xsight Labs a Národní laboratoř Los Alamos. V říjnu 2025 společnost Hammerspace uvedla, že produkční systémy budou k dispozici začátkem roku 2026, takže harmonogram se posunul přibližně o rok. Systém používá disky U.2 a U.3, protože ty se nyní dodávají ve velkém množství, a společnost Hammerspace navrhla design s ohledem na hustší rozměry. Společnosti Hammerspace a Xsight popsaly cestu k exabajtu na rack, což je více než dvojnásobek toho, co by pojal plný 42U největší současný disk.

Společnost Hammerspace uvedla, že práce na prototypu tohoto systému začala asi před dvěma lety a že první využití pochází od hyperscalerů, kteří umisťují jeden nebo dva racky na horní část každého racku s grafickými kartami a upřednostňují tak poměr ceny a výkonu nad úsporou energie. V tomto uspořádání Hammerspace mapuje NVMe uvnitř serverů s grafickými kartami na úroveň G3 s označením NVIDIA a racku OFP s TLC v každém racku na úroveň G4.

Výkonnostní deklarace a testovací podmínky

Společnost Hammerspace udává propustnost pěti sledů na 390 GB/s pro zápis bez zrcadlení a 15 milionů náhodných IOPS pro čtení 4K. Uvedené podmínky jsou NFSv4.2 s pNFS přes TCP na 400GbE fabric s podnikovými SSD disky Gen5 TLC. Čtení je dimenzováno až na 80 GB/s na sled, neboli 400 GB/s na sled. To je přibližně 40 GB/s přes každý ze dvou 400GbE portů sledu, což v podstatě saturuje linky po započítání protokolové režie, takže síťové porty stanovují strop propustnosti čtení.

Chladič DPU s měděnými tepelnými trubicemi vedle SSD disku U.2 NVMe a čtyřdiskového balíčku vyjmutého ze saně Hammerspace OFP

Ochrana je zajištěna zrcadlením, které se nastavuje pro každý soubor nebo adresář pomocí zásad a lze jej měnit online. Rychlost zápisu klesá na 195 GB/s na rackový zásobník s obousměrným zrcadlením a 130 GB/s s třícestným, přičemž obousměrné zrcadlení také snižuje využitelnou kapacitu na polovinu, na přibližně 4.9 PB na plně obsazeném racku QLC. Hammerspace doporučuje provozovat systém bez zrcadel pro data, která lze regenerovat, jako je například mezipaměť KV. Společnost uvádí dva až pětkrát vyšší výkon na rackovou jednotku než nejmenovaný nejbližší konkurent. Nezveřejnila latenci, počty klientů ani výsledky IO500 a MLPerf Storage pro OFP a my jsme tyto testy neprovedli ani neauditovali.

Specifikace Otevřená flashová platforma Hammerspace
Přehled platformy
Architektura Uzly flash úložiště založené na DPU bez úložného serveru x86
Sáně 8 x U.2/U.3 NVMe SSD disky ve dvou sadách po 4 discích
64jádrový procesor Arm DPU (Xsight Labs E1)
2 x 400GbE QSFP-DD
1U zásobník 1 až 5 saní
Až 40 SSD disků
Až 320 jader Arm
Až 10x 400GbE
Podpora disku Kvalifikované SSD disky U.2/U.3, PCIe Gen5 nebo starší
TLC nebo QLC
Maximální hrubá kapacita 1.97 PB na saně
9.83 PB na zásobník
Na základě 245.76TB QLC SSD disků
protokoly NFSv4.2 s pNFS
Ochrana dat Zrcadlení podle zásad pro každý soubor nebo adresář: žádné, obousměrné nebo trojsměrné
Výkon (údaje Hammerspace, SSD disky Gen5 TLC, 400 GbE, TCP)
Propustnost čtení 80 GB/s na zařízení
400 GB/s na zásobník
Propustnost zápisu, bez zrcadla 78 GB/s na zařízení
390 GB/s na zásobník
Propustnost zápisu, 2cestné zrcadlo 39 GB/s na zařízení
195 GB/s na zásobník
Propustnost zápisu, 3cestné zrcadlo 26 GB/s na zařízení
130 GB/s na zásobník
4K náhodné čtení 3 miliony IOPS na sled
15 milionů IOPS na zásobník
Moc a fyzická síla
Maximální výkon 360 W na saně
1 800 W na zásobník
Napájecí zdroje Dva titanové panely s výkonem 2 160 W na zásobník
Form Factor 1U zásuvka, hloubka 106.64 cm
Vyžaduje 1 200mm rack
Chlazení Vzduch, maximální vstupní teplota 40 °C na hladině moře
management IPMI, Okouník
dostupnost Citace nyní
Doprava v první polovině roku 2027

Skrýš úrovně 0 a KV

Hammerspace umisťuje OFP jako Tier 1, za Tier 0 tvořenou NVMe, které se již nachází uvnitř GPU serverů, exportuje je přes NFS a agreguje do sdílené vrstvy v celém clusteru bez klienta nebo agenta na výpočetních uzlech. Data zapsaná na této vrstvě se zrcadlí v rámci clusteru pro ochranu a přesouvají se do jiných vrstev podle zásad a Hammerspace uvádí, že běžným vzorem je zapisovat trénovací kontrolní body lokálně a nechat systém přesouvat starší do objektového úložiště. Hammerspace uvádí 4.4krát vyšší sekvenční šířku pásma a o 56 procent nižší latenci pro Tier 0 oproti externímu sdílenému úložišti, bez zveřejnění testovací konfigurace.

Role mezipaměti KV používá stejnou vrstvu, a to z důvodu, že inferenční server, který může znovu načíst vypočítaný kontext konverzace ze sdíleného úložiště, nemusí tyto tokeny na GPU přepočítávat. Hammerspace nefunguje jako správce mezipaměti a prezentuje sdružený Tier 0 NVMe s OFP za ním jako POSIX úložiště pro správce mezipaměti inferenčního softwaru.

Datová inteligence: Katalog, DeepScan a dotazy v přirozeném jazyce

Vrstva datové inteligence začíná katalogem, který indexuje metadata souborů a objektů napříč všemi úložnými systémy v daném jmenném prostoru, aniž by data přesouval. Druhá úroveň, DeepScan, otevírá soubory a vyhledává osobní, finanční a chráněné zdravotní informace na vyžádání nebo podle plánu a její zjištění se stávají prohledávatelnými tagy. Dotazy lze psát v přirozeném jazyce pomocí LLM dle výběru zákazníka. Výsledky se odesílají do stávajícího enginu zásad, který Hammerspace nazývá „objectives“ (cíle), takže administrátor může najít každý soubor označený jako „připravený pro trénování“ nebo omezený na jednu zemi a nastavit pro tuto sadu pravidlo umístění.

Zobrazení katalogu dat Hammerspace Data System s kapacitou podle webu, soubory podle indexu, distribucí typů obsahu, růstem indexu a stářím souborů, zobrazené s ukázkovými daty na stránce produktu Hammerspace

Cíle jsou deklarativní pravidla připojená ke sdílené složce, svazku, adresáři nebo souboru, jako například přesun dat beze změny po dobu 30 dnů nebo ponechání tří kopií na třech místech. Nové automatizace je spouštějí z podmínek, které zahrnují limity kapacity, plány a události, s krokem náhledu před schválením změn. Značky dědí směrem dolů po stromu adresářů a sledují soubory mezi úložnými systémy a cloudy. Software pokrývá úložiště souborů a objektů od jakéhokoli dodavatele a nespravuje strukturovaná data.

Zobrazení automatizací Hammerspace s pravidly spouštění s metrikami, plánem a podmínkami událostí, zobrazené s ukázkovými daty na stránce produktu Hammerspace

První zákazníci a výhled

Referenčním zákazníkem při spuštění je Kaiko, společnost zabývající se klinickou umělou inteligencí s kancelářemi v Amsterdamu a Curychu, která trénuje modely na zobrazovacích a patologických datech. Kaiko provozuje Hammerspace napříč Microsoft Azure a cloudy Nebul a Nebius GPU jako jeden jmenný prostor, používá NVMe ve svých uzlech GPU jako úroveň 0 pro trénování a má kontrolní body umístěné na Azure Blob Storage na základě zásad. Hammerspace uvádí, že všechny pracovní postupy strojového učení Kaiko v těchto třech klastrech byly přesunuty do systému. Případová studie nezahrnuje hardware OFP.

Společnost Hammerspace nám sdělila, že Kaiko systém přijala v době, kdy se počet GPU na platformě Nebius rozrůstal z přibližně 128 na více než 1 000, a že její stávající all-flash NAS v cloudu Nebul byl do jmenného prostoru převeden. Společnost také popsala nejmenovanou hyperscale výzkumnou laboratoř pro umělou inteligenci, která po roce, kdy byl Lustre jejím největším zdrojem tiketů podpory, nahradila Amazon FSx pro Lustre clusterem Hammerspace s kapacitou 30 PB v AWS a nyní rozšiřuje jmenný prostor do místního datového centra. Hammerspace uvádí přibližně třikrát rychlejší operace s velkými soubory.

OFP se připojuje k dalším návrhům, které umisťují DPU tam, kde býval procesor úložného serveru, včetně referenční architektury BlueField-4 STX, kterou NVIDIA představila na GTC, a verze od Hammerspace se liší tím, že ji kombinuje se souborovým systémem, který také běží bez vlastního hardwaru. Hammerspace tento hardware předvádí na SC26 a ceny zatím nezveřejnil.

Natočili jsme s Hammerspace prohlídku saní a zásobníku OFP na SC26 a video přidáme k tomuto článku, jakmile bude publikován.

Datový systém Hammerspace

Otevřená flashová platforma Hammerspace

Zapojte se do StorageReview

Zpravodaj | YouTube | Podcast iTunes / Spotify | Instagram | Twitter | TikTok | RSS kanál

Brian Beeler

Brian sídlí v Cincinnati ve státě Ohio a je hlavním analytikem a prezidentem společnosti StorageReview.com.