StorageReview.com

Hammerspace Data System viene lanciato con OFP, un vassoio flash DPU 1U con velocità nominale di 390 GB/s e capacità fino a 9.83 PB.

Impresa  ◇  Archiviazione aziendale

Hammerspace ha trasformato la sua piattaforma dati definita via software (SDP) nel sistema dati Hammerspace e, per la prima volta, lo venderà come sistema completo con hardware. Il fulcro è la Hammerspace Open Flash Platform (OFP), un vassoio 1U che ospita cinque nodi flash basati su DPU senza server di storage x86, con velocità di scrittura dichiarate dall'azienda di 390 GB/s e 15 milioni di IOPS per unità rack, oltre a una capacità raw fino a 9.83 PB. Il lancio include anche un livello di intelligenza dati e una funzione di cache KV per NVMe locale alla GPU. OFP è già disponibile per la richiesta di preventivo e le spedizioni sono previste per la prima metà del 2027.

Sistema dati Hammerspace presso SC26: due nodi Hammerspace con cornici a rete viola sopra un vassoio OFP 1U contenente cinque slitte in un rack con marchio aziendale.

Dalla piattaforma dati al sistema dati

Il prodotto principale di Hammerspace è un file system globale parallelo che separa i metadati dal percorso dati e presenta lo storage NAS, a oggetti e cloud esistente come un unico namespace su pNFS, NFS, SMB e S3. I client vi accedono tramite il client NFSv4.2 integrato nelle distribuzioni Linux standard, senza alcun agente proprietario, utilizzando il layout Flex Files che Hammerspace afferma di aver progettato per la specifica NFS. L'azienda descrive il Data System come un'estensione di tale software, organizzata attorno a cinque funzionalità: unificazione dei dati, intelligenza, orchestrazione, accelerazione e storage, di cui intelligenza e storage sono novità.

La novità a livello commerciale consiste nella possibilità di acquistare l'intero sistema da Hammerspace, con software, nodi di metadati e storage installati e supportati dall'azienda. I nodi di metadati, che Hammerspace chiama Anvil, sono server x86 1U nelle configurazioni Standard e Large della serie M, dotati di due porte dati 100GbE, distribuiti in coppia ad alta disponibilità in ogni sito per eseguire il piano di controllo che gestisce lo spazio dei nomi ed esegue le policy di posizionamento. Continua la distribuzione del solo software sull'hardware del cliente, così come gli Hammerspace Ready Node di Dell, Supermicro e Hitachi Vantara e le immagini disponibili sul marketplace di AWS, Azure, Google Cloud e Oracle Cloud.

L'opzione di sistema risponde a uno schema riscontrato da Hammerspace nelle vendite, in cui il software ha vinto la valutazione tecnica, ma il cliente ha comunque acquistato un prodotto integrato da un altro fornitore per la semplicità d'uso. Il software è concesso in licenza tramite abbonamento, con un prezzo basato sulla capacità gestita. Lo storage di Hammerspace viene solitamente scelto quando un nuovo cluster GPU necessita di storage ad alte prestazioni, mentre i dati esistenti del cliente risiedono su sistemi NetApp, PowerScale o sistemi a oggetti che il namespace può gestire senza problemi.

Ogni cluster di sito associa gli Anvil a un insieme di nodi di servizi dati e i cluster si uniscono in un unico file system globale. I metadati vengono replicati tra i siti in modo continuo, con un ritardo di circa un secondo tra le posizioni distanti, mentre i dati stessi vengono spostati solo quando una policy o una richiesta di accesso lo richiede. Gli scheduler dei processi possono avviare questo spostamento tramite API e connettori nativi. L'azienda ha citato l'esempio di clienti del settore delle scienze biologiche che acquisiscono i dati degli strumenti tramite SMB, li elaborano tramite pNFS e li rendono disponibili tramite S3 dallo stesso sistema.

Le valutazioni vengono generalmente eseguite come prova di concetto, con immagini cloud "porta la tua licenza" come soluzione self-service. La capacità del disco proviene da JBOD e server di storage realizzati da fornitori di dischi rigidi; OFP è un progetto Hammerspace realizzato da un produttore a contratto, e i sistemi vengono forniti da rivenditori e partner di integrazione. Un array a blocchi si unisce al namespace solo quando può essere montato tramite NFS.

"Aggiungere semplicemente più spazio di archiviazione non è la soluzione", ha affermato David Flynn, fondatore e CEO di Hammerspace. Flynn ha descritto il lancio come l'applicazione al settore dei dati del consolidamento che i progetti di fabbriche basate sull'intelligenza artificiale hanno portato nel settore del calcolo.

All'interno della piattaforma Open Flash

Ogni modulo OFP è un nodo di storage completo, largo un quinto di un'unità rack, con otto SSD NVMe U.2 o U.3 in due pacchi rimovibili da quattro unità, due porte 400GbE QSFP-DD e una DPU Arm a 64 core al posto di una scheda madre x86. La DPU è la Xsight Labs E1, che Xsight realizza con il processo a 5 nm di TSMC, con 64 core Arm Neoverse N2, due MAC 400G, PCIe Gen5 e un consumo energetico tipico di 70 W. Esegue Linux standard e ogni modulo appare al file system Hammerspace come un server NFS.

Slitta OFP di Hammerspace senza coperchio, che mostra la DPU di Xsight Labs, i moduli di memoria DDR5 e un alloggiamento per le porte di rete.

Un vassoio 1U può ospitare da uno a cinque sled, per un massimo di 40 unità, 320 core Arm e dieci porte 400GbE per unità rack. Hammerspace dichiara un consumo massimo di 360 W per sled e 1,800 W per vassoio con due alimentatori Titanium da 2,160 W, con manutenzione senza attrezzi per sled e pacchi di unità e IPMI e Redfish per la gestione. Il vassoio ha una profondità di 106.64 cm e richiede un rack da 1,200 mm, il che esclude armadi rack aziendali meno profondi. Hammerspace stima una densità di unità 3.3 volte superiore a quella di un tipico server NVMe 2U a 24 alloggiamenti, con 160 SSD in 4U contro 48.

Presso l'SC26, su un tavolo, si trovano dei moduli OFP di Hammerspace Data System, con un pacco di quattro unità parzialmente installato e due SSD U.2 NVMe separati.

Con otto SSD QLC da 245.76 TB, la capacità massima offerta da Hammerspace, e paragonabile a quella di unità come la KIOXIA LC9 , un modulo può contenere 1.97 PB di spazio grezzo, mentre un vassoio completo ne contiene 9.83 PB. Al consumo massimo del vassoio di 1,800 W, si tratta di circa 183 W per petabyte di spazio grezzo. I moduli sono compatibili con unità TLC o QLC su PCIe Gen5 o precedenti, e Hammerspace posiziona le unità TLC per le prestazioni e le QLC per la capacità. Un rack da 42U riempito con i vassoi potrebbe contenere circa 413 PB e assorbire fino a 75.6 kW.

Il progetto trae origine dall'iniziativa Open Flash Platform avviata da Hammerspace nel 2025, con Xsight Labs e il Los Alamos National Laboratory tra i partecipanti. Nell'ottobre del 2025, Hammerspace aveva annunciato che i sistemi di produzione sarebbero stati disponibili all'inizio del 2026, quindi la tempistica è slittata di circa un anno. Il modulo utilizza unità U.2 e U.3 perché attualmente vengono prodotte in grandi volumi e Hammerspace ha concepito il progetto pensando a fattori di forma più densi. Hammerspace e Xsight hanno descritto un percorso per raggiungere un exabyte per rack, più del doppio della capacità di un'unità 42U completa delle unità attualmente più grandi.

Hammerspace ha affermato che i lavori sul prototipo del supporto sono iniziati circa due anni fa e che la prima adozione è avvenuta presso gli hyperscaler che posizionano uno o due vassoi nella parte superiore di ogni rack GPU, privilegiando la densità delle prestazioni rispetto al risparmio energetico. In questa configurazione, Hammerspace mappa gli NVMe all'interno dei server GPU al livello che NVIDIA etichetta come G3 e un vassoio OFP riempito con TLC in ogni rack al livello G4.

Prestazioni dichiarate e condizioni di prova

Hammerspace dichiara una velocità di scrittura di 390 GB/s per un vassoio a cinque unità senza mirroring e 15 milioni di IOPS in lettura casuale 4K. Le condizioni dichiarate sono NFSv4.2 con pNFS su TCP su una rete 400GbE con SSD TLC di quinta generazione di livello enterprise. La velocità di lettura è stimata fino a 80 GB/s per unità, ovvero 400 GB/s per vassoio. Ciò corrisponde a circa 40 GB/s attraverso ciascuna delle due porte 400GbE di un'unità, il che satura essenzialmente i collegamenti una volta considerato l'overhead del protocollo; pertanto, le porte di rete definiscono il limite massimo della velocità di lettura.

Dissipatore di calore DPU con tubi di calore in rame accanto a un SSD U.2 NVMe e a un pacco di quattro unità rimosso da un supporto OFP di Hammerspace.

La protezione avviene tramite mirroring, configurabile per file o directory tramite policy e modificabile online. Le velocità di scrittura si riducono a 195 GB/s per vassoio con mirroring bidirezionale e a 130 GB/s con mirroring tridirezionale; il mirroring bidirezionale dimezza inoltre la capacità utilizzabile, portandola a circa 4.9 PB su un vassoio QLC completamente popolato. Hammerspace suggerisce di utilizzare il sistema senza mirroring per i dati che possono essere rigenerati, come la cache KV. L'azienda dichiara prestazioni per unità rack da due a cinque volte superiori rispetto a un concorrente più vicino, di cui non ha rivelato il nome. Non ha pubblicato dati relativi a latenza, numero di client o risultati di IO500 e MLPerf Storage per OFP, e noi non abbiamo eseguito né verificato questi test.

Specificazione Piattaforma Hammerspace Open Flash
Panoramica della piattaforma
Architettura Nodi di archiviazione flash basati su DPU senza server di archiviazione x86
Slitta 8 SSD NVMe U.2/U.3 in due confezioni da 4 unità ciascuna
DPU Arm a 64 core (Xsight Labs E1)
2 x 400GbE QSFP-DD
Vassoio 1U Da 1 a 5 slitte
Fino a 40 SSD
Fino a 320 core Arm
Fino a 10 unità da 400 GbE
Supporto per unità SSD U.2/U.3 qualificati, PCIe Gen5 o precedenti
TLC o QLC
Massima capacità grezza 1.97 PB per slitta
9.83 PB per vassoio
Basato su SSD QLC da 245.76 TB
protocolli NFSv4.2 con pNFS
Protezione dei dati Mirroring per file o directory in base a criteri specifici: nessuno, bidirezionale o tridirezionale.
Prestazioni (dati Hammerspace, SSD TLC di quinta generazione, 400 GbE, TCP)
Leggi produttività 80 GB/s per slitta
400 GB/s per vassoio
Velocità di scrittura, nessun mirroring 78 GB/s per slitta
390 GB/s per vassoio
Velocità di scrittura, mirroring a 2 vie 39 GB/s per slitta
195 GB/s per vassoio
Velocità di scrittura, mirroring a 3 vie 26 GB/s per slitta
130 GB/s per vassoio
Lettura casuale 4K 3 milioni di IOPS per slitta
15 milioni di IOPS per vassoio
Potenza e Fisico
Potenza massima 360 W per slitta
1,800 W per vassoio
Alimentatori Due lampade in titanio da 2,160 W per vassoio
Fattore di forma Vassoio 1U, profondità 106.64 cm
Richiede un rack da 1,200 mm
Raffreddamento Aria, temperatura massima di ingresso 40°C al livello del mare
Management IPMI, pesce rosso
Disponibilità Preventivo in corso
Spedizione prevista nella prima metà del 2027

Cache di livello 0 e KV

Hammerspace posiziona OFP come Livello 1, dietro un Livello 0 costituito da NVMe già presenti nei server GPU, che vengono esportati tramite NFS e aggregati in un livello condiviso a livello di cluster, senza client o agenti sui nodi di calcolo. I dati scritti in questo livello vengono replicati in tutto il cluster per protezione e spostati negli altri livelli in base a policy. Hammerspace afferma che una pratica comune è quella di scrivere localmente i checkpoint di training e lasciare che il sistema sposti quelli più vecchi su object storage. Hammerspace dichiara una larghezza di banda sequenziale 4.4 volte superiore e una latenza inferiore del 56% per il Livello 0 rispetto allo storage condiviso esterno, senza tuttavia pubblicare la configurazione di test.

Il ruolo di cache KV utilizza lo stesso livello, partendo dal presupposto che un server di inferenza in grado di ricaricare il contesto calcolato di una conversazione da una memoria condivisa non debba ricalcolare tali token sulla GPU. Hammerspace non funge da gestore della cache e presenta il pool di NVMe di livello 0, con OFP a supporto, come memoria POSIX affinché il gestore della cache del software di inferenza possa utilizzarla.

Analisi dei dati: catalogo, scansione approfondita e interrogazioni in linguaggio naturale

Il livello di intelligenza dei dati inizia con un catalogo che indicizza i metadati di file e oggetti in ogni sistema di archiviazione nello spazio dei nomi senza spostare i dati. Un secondo livello, DeepScan, apre i file per cercare informazioni personali, finanziarie e sanitarie protette su richiesta o in base a una pianificazione, e i risultati vengono trasformati in tag ricercabili. Le query possono essere scritte in linguaggio naturale tramite un LLM a scelta del cliente. I risultati alimentano il motore di policy esistente, che Hammerspace chiama obiettivi, in modo che un amministratore possa trovare tutti i file contrassegnati come pronti per la formazione o limitati a un paese e impostare una regola di posizionamento su tale insieme.

Visualizzazione del catalogo dati di Hammerspace Data System con capacità per sito, file per indice, distribuzione dei tipi di contenuto, crescita dell'indice ed età dei file, mostrata con dati di esempio sulla pagina del prodotto di Hammerspace.

Gli obiettivi sono regole dichiarative associate a una condivisione, un volume, una directory o un file, come ad esempio spostare i dati senza modificarli per 30 giorni o conservarne tre copie in tre siti diversi. Le nuove automazioni li attivano in base a condizioni che includono soglie di capacità, pianificazioni ed eventi, con una fase di anteprima prima dell'approvazione delle modifiche. I tag vengono ereditati lungo la struttura delle directory e seguono i file tra i sistemi di storage e il cloud. Il software supporta sistemi di storage di file e oggetti di qualsiasi fornitore e non gestisce dati strutturati.

Le automazioni di Hammerspace visualizzano le regole di attivazione degli elenchi con condizioni relative a metriche, pianificazione ed eventi, come mostrato con dati di esempio nella pagina del prodotto di Hammerspace.

Primi clienti e prospettive

Il cliente di riferimento al momento del lancio è Kaiko, un'azienda di intelligenza artificiale clinica con sedi ad Amsterdam e Zurigo che addestra modelli su dati di imaging e patologia. Kaiko esegue Hammerspace su Microsoft Azure e sui cloud GPU Nebul e Nebius come un unico namespace, utilizza NVMe nei suoi nodi GPU come Tier 0 per l'addestramento e ha checkpoint posizionati su Azure Blob Storage tramite policy. Hammerspace afferma che tutti i flussi di lavoro di ingegneria ML di Kaiko su questi tre cluster sono stati migrati al sistema. Il caso di studio non prevede l'utilizzo di hardware OFP.

Hammerspace ci ha comunicato che Kaiko ha adottato il sistema durante la fase di crescita, passando da circa 128 GPU a oltre 1,000 su Nebius, e che il suo NAS all-flash esistente nel cloud Nebul è stato integrato direttamente nello spazio dei nomi. L'azienda ha inoltre descritto un laboratorio di ricerca sull'IA su larga scala, di cui non ha rivelato il nome, che ha sostituito Amazon FSx per Lustre con un cluster Hammerspace da 30 PB su AWS, dopo un anno in cui Lustre è stata la principale fonte di richieste di assistenza, e che ora sta estendendo lo spazio dei nomi a un data center on-premise. Hammerspace afferma che le operazioni su file di grandi dimensioni risultano circa tre volte più veloci in questa nuova sede.

OFP si unisce ad altri progetti che posizionano una DPU dove prima si trovava il processore del server di storage, tra cui l' architettura di riferimento BlueField-4 STX presentata da NVIDIA al GTC, e la versione di Hammerspace si differenzia per l'abbinamento con un file system che funziona anche senza il suo hardware. Hammerspace sta presentando l'hardware all'SC26 e non ha ancora pubblicato i prezzi.

Abbiamo filmato una dimostrazione del carrello e del vassoio OFP con Hammerspace all'SC26 e aggiungeremo il video a questo articolo non appena verrà pubblicato.

Sistema dati Hammerspace

Piattaforma Hammerspace Open Flash

Interagisci con StorageReview

Newsletter | YouTube | Podcast iTunes / Spotify | Instagram | Twitter | TikTok | Feed RSS

Brian Beeler

Brian ha sede a Cincinnati, Ohio ed è capo analista e presidente di StorageReview.com.