StorageReview.com

Hammerspace Data System은 390GB/s의 전송 속도와 최대 9.83PB의 저장 용량을 제공하는 1U DPU 플래시 트레이인 OFP를 출시했습니다.

기업  ◇  엔터프라이즈 스토리지

Hammerspace는 자사의 소프트웨어 정의 데이터 플랫폼을 Hammerspace 데이터 시스템으로 발전시켜 처음으로 하드웨어를 포함한 완벽한 시스템으로 판매합니다. 핵심 구성 요소는 Hammerspace Open Flash Platform(OFP)으로, x86 스토리지 서버 없이 5개의 DPU 기반 플래시 노드를 탑재한 1U 트레이입니다. 회사 측은 OFP의 쓰기 속도가 랙 유닛당 390GB/s, IOPS가 1,500만 개에 달하며, 원시 저장 용량은 최대 9.83PB라고 밝혔습니다. 이번 출시에는 데이터 인텔리전스 레이어와 GPU 로컬 NVMe용 KV 캐시 역할도 추가되었습니다. OFP는 현재 견적 문의가 가능하며 2027년 상반기에 출시될 예정입니다.

SC26에 전시된 해머스페이스 데이터 시스템: 브랜드 랙에 장착된 OFP 1U 트레이 위에 보라색 메시 베젤이 있는 해머스페이스 노드 두 개와 그 위에 놓인 슬레드 다섯 개.

데이터 플랫폼에서 데이터 시스템으로

Hammerspace의 핵심 제품은 메타데이터와 데이터 경로를 분리하고 기존 NAS, 객체 및 클라우드 스토리지를 pNFS, NFS, SMB 및 S3를 통해 하나의 네임스페이스로 제공하는 병렬 글로벌 파일 시스템입니다. 클라이언트는 표준 Linux 배포판에 내장된 NFSv4.2 클라이언트를 통해 이 시스템에 접근하며, 별도의 에이전트 설치 없이 Hammerspace가 NFS 사양에 맞춰 설계했다고 밝힌 Flex Files 레이아웃을 사용합니다. Hammerspace는 데이터 시스템을 이 소프트웨어의 확장 기능으로 설명하며, 데이터 통합, 인텔리전스, 오케스트레이션, 가속 및 스토리지라는 다섯 가지 기능을 중심으로 구성되어 있다고 밝혔습니다. 이 중 인텔리전스와 스토리지는 새롭게 추가된 기능입니다.

상업적인 변화는 소프트웨어, 메타데이터 노드, 스토리지를 포함한 전체 시스템을 Hammerspace에서 구매하고 지원받을 수 있다는 점입니다. Hammerspace에서 Anvil이라고 부르는 메타데이터 노드는 1U x86 서버로, Standard 및 Large M-Series 구성에 100GbE 데이터 포트 2개를 갖추고 있으며, 각 사이트에 고가용성 쌍으로 배포되어 네임스페이스를 관리하고 배치 정책을 실행하는 컨트롤 플레인을 운영합니다. 고객 하드웨어에 소프트웨어만 배포하는 방식은 계속 유지되며, Dell, Supermicro, Hitachi Vantara의 Hammerspace Ready Nodes와 AWS, Azure, Google Cloud, Oracle Cloud의 마켓플레이스 이미지도 제공됩니다.

이 시스템 옵션은 해머스페이스가 판매에서 보였던 패턴, 즉 소프트웨어가 기술 평가에서 승리했음에도 불구하고 고객이 더 간편한 구매를 위해 다른 벤더의 통합 제품을 구매하는 경우에 대한 대응책입니다. 이 소프트웨어는 관리 용량에 따라 가격이 책정되는 구독 방식으로 라이선스가 부여됩니다. 해머스페이스 스토리지는 일반적으로 새로운 GPU 클러스터에 고성능 스토리지가 필요할 때 도입되며, 고객의 기존 데이터는 NetApp, PowerScale 또는 객체 시스템에 저장되어 있는 경우 해머스페이스 네임스페이스가 해당 시스템을 대체하여 관리할 수 있습니다.

각 사이트의 클러스터는 이러한 Anvil들을 데이터 서비스 노드 세트와 연결하고, 클러스터들은 하나의 글로벌 파일 시스템으로 통합됩니다. 메타데이터는 사이트 간에 지속적으로 복제되며, 멀리 떨어진 위치 간에는 약 1초 정도의 지연만 발생합니다. 데이터 자체는 정책이나 액세스 요청에 따라 필요한 경우에만 이동합니다. 작업 스케줄러는 API와 네이티브 커넥터를 통해 이러한 데이터 이동을 시작할 수 있습니다. 이 회사는 생명 과학 분야 고객들이 SMB를 통해 기기 데이터를 수집하고, pNFS를 통해 처리한 후, 동일 시스템에서 S3를 통해 제공하는 사례를 제시했습니다.

평가는 일반적으로 개념 증명(Proof of Concept) 형태로 진행되며, 자체 라이선스를 사용하는 클라우드 이미지를 셀프 서비스 방식으로 활용합니다. 디스크 용량은 하드 드라이브 공급업체에서 구축한 JBOD 및 스토리지 서버에서 제공됩니다. OFP는 Hammerspace에서 설계하고 계약 제조업체가 구축하며, 리셀러 및 통합 파트너가 시스템을 제공합니다. 블록 어레이는 NFS를 통해 마운트할 수 있는 경우에만 네임스페이스에 참여합니다.

해머스페이스의 창립자 겸 CEO인 데이비드 플린은 "단순히 저장 공간을 늘리는 것만으로는 해결책이 될 수 없다"고 말했습니다. 플린은 이번 출시를 AI 팩토리 디자인이 컴퓨팅 분야에 가져왔던 통합 개념을 데이터 분야에도 적용하는 것으로 설명했습니다.

오픈 플래시 플랫폼 내부

각 OFP 슬레드는 랙 유닛의 5분의 1 크기의 완전한 스토리지 노드로, 탈착식 4개 드라이브 팩 2개에 8개의 U.2 또는 U.3 NVMe SSD, 2개의 400GbE QSFP-DD 포트, 그리고 x86 마더보드 대신 64코어 Arm DPU를 탑재하고 있습니다. 이 DPU는 Xsight Labs E1으로, Xsight가 TSMC의 5nm 공정으로 제작했으며, 64개의 Arm Neoverse N2 코어, 2개의 400G MAC, PCIe Gen5를 지원하고 일반적인 전력 소비량은 70W입니다. 표준 Linux 운영 체제를 실행하며, 각 슬레드는 Hammerspace 파일 시스템에서 NFS 서버로 인식됩니다.

덮개를 벗긴 해머스페이스 OFP 슬레드의 모습입니다. 내부에는 Xsight Labs DPU, DDR5 메모리 모듈, 그리고 네트워크 포트 케이지가 있습니다.

1U 트레이에는 최대 5개의 슬레드를 장착할 수 있어 랙 유닛당 최대 40개의 드라이브, 320개의 ARM 코어, 10개의 400GbE 포트를 지원합니다. Hammerspace는 듀얼 2,160W Titanium 전원 공급 장치를 사용하여 슬레드당 최대 360W, 트레이당 최대 1,800W의 전력을 공급하며, 슬레드와 드라이브 팩은 툴 없이 간편하게 교체할 수 있고, IPMI와 Redfish를 통해 관리할 수 있다고 명시하고 있습니다. 트레이의 깊이는 106.64cm이며 1,200mm 랙이 필요하므로 깊이가 얕은 엔터프라이즈 캐비닛에는 사용할 수 없습니다. Hammerspace는 4U 트레이에 160개의 SSD를 장착하여 일반적인 2U, 24베이 NVMe 서버(48개)보다 3.3배 높은 드라이브 밀도를 제공한다고 밝혔습니다.

SC26 전시장의 테이블 위에 놓인 Hammerspace Data System OFP 슬레드. 4개의 드라이브가 장착된 팩 하나와 분리된 U.2 NVMe SSD 두 개가 보인다.

Hammerspace에서 제공하는 최대 용량인 245.76TB QLC SSD 8개를 장착할 경우, KIOXIA LC9 와 같은 드라이브 용량을 고려하면 슬레드 하나에 1.97PB의 원시 용량을, 트레이 하나를 가득 채우면 9.83PB를 저장할 수 있습니다. 트레이의 최대 전력 소모량이 1,800W라고 가정하면, 원시 용량 1페타바이트당 약 183W의 전력을 소비하게 됩니다. 슬레드는 PCIe Gen5 이하 버전의 TLC 또는 QLC 드라이브를 지원하며, Hammerspace는 성능을 중시하여 TLC를, 용량을 중시하여 QLC를 추천합니다. 42U 랙에 트레이를 가득 채우면 약 413PB의 용량을 저장할 수 있으며, 최대 75.6kW의 전력을 소비합니다.

이 설계는 해머스페이스(Hammerspace)가 2025년에 시작한 오픈 플래시 플랫폼(Open Flash Platform) 이니셔티브에서 비롯되었으며, Xsight Labs와 로스앨러모스 국립 연구소(Los Alamos National Laboratory) 등이 참여 기관으로 거론되었습니다. 해머스페이스는 2025년 10월에 양산 시스템을 2026년 초에 출시할 것이라고 발표했는데, 이는 출시 일정이 약 1년 정도 앞당겨진 것입니다. 이 슬레드는 현재 대량 생산되고 있는 U.2 및 U.3 드라이브를 사용하며, 해머스페이스는 더욱 고밀도의 폼팩터를 염두에 두고 설계했습니다. 해머스페이스와 Xsight는 랙당 엑사바이트(exabyte) 용량을 달성하는 방안을 제시했는데, 이는 현재 가장 큰 드라이브 42U 랙에 저장할 수 있는 용량의 두 배가 넘는 수치입니다.

해머스페이스는 슬레드 프로토타입 개발이 약 2년 전에 시작되었으며, 초기에는 각 GPU 랙 상단에 트레이 한두 개를 배치하고 전력 절감보다는 랙 밀도와 성능 밀도를 중시하는 하이퍼스케일러에서 채택되었다고 밝혔습니다. 이러한 레이아웃에서 해머스페이스는 GPU 서버 내부의 NVMe를 NVIDIA에서 G3라고 부르는 계층에, 각 랙에 있는 TLC로 채워진 OFP 트레이를 G4 계층에 매핑합니다.

성능 관련 주장 및 시험 조건

Hammerspace는 미러링 없이 5개 슬레드로 구성된 트레이의 쓰기 처리량을 390GB/s, 4K 랜덤 읽기 IOPS를 1,500만까지 지원한다고 명시했습니다. 명시된 조건은 엔터프라이즈급 Gen5 TLC SSD를 사용하는 400GbE 패브릭에서 TCP를 통한 pNFS를 지원하는 NFSv4.2 환경입니다. 읽기 속도는 슬레드당 최대 80GB/s, 트레이당 최대 400GB/s입니다. 이는 슬레드의 400GbE 포트 두 개를 통해 각각 약 40GB/s의 속도를 낼 수 있다는 의미인데, 프로토콜 오버헤드를 고려하면 사실상 링크가 포화 상태에 이르므로 읽기 처리량의 최대치는 네트워크 포트 용량에 따라 결정됩니다.

구리 히트 파이프가 있는 DPU 방열판 옆에 U.2 NVMe SSD와 Hammerspace OFP 슬레드에서 분리한 4개 드라이브 팩이 놓여 있다.

보호는 미러링을 통해 이루어지며, 정책에 따라 파일 또는 디렉터리별로 설정되고 온라인으로 변경할 수 있습니다. 쓰기 속도는 양방향 미러링 시 트레이당 195GB/s, 삼방향 미러링 시 130GB/s로 떨어지며, 양방향 미러링은 사용 가능한 용량을 절반으로 줄여 QLC 트레이가 완전히 채워진 경우 약 4.9PB로 제한합니다. Hammerspace는 KV 캐시와 같이 재생성 가능한 데이터의 경우 미러링 없이 실행할 것을 권장합니다. 이 회사는 익명의 경쟁사 대비 랙 유닛당 성능이 2~5배 우수하다고 주장합니다. 하지만 지연 시간, 클라이언트 수, IO500 및 MLPerf Storage 테스트 결과는 OFP에 대해 공개하지 않았으며, 당사는 이러한 테스트를 실행하거나 검토하지 않았습니다.

스펙 해머스페이스 오픈 플래시 플랫폼
플랫폼 개요
아키텍처 x86 스토리지 서버가 없는 DPU 기반 플래시 스토리지 노드
썰매 4개씩 묶음으로 구성된 2개의 팩에 총 8개의 U.2/U.3 NVMe SSD가 포함되어 있습니다.
64코어 ​​Arm DPU (Xsight Labs E1)
2 x 400GbE QSFP-DD
1U 트레이 썰매 1~5개
최대 40개의 SSD
최대 320개의 Arm 코어
최대 10개의 400GbE
드라이브 지원 U.2/U.3 규격을 준수하는 PCIe Gen5 이하 SSD
TLC 또는 QLC
최대 원시 용량 썰매당 1.97PB
트레이당 9.83파운드
245.76TB QLC SSD 기반
프로토콜 pNFS를 사용한 NFSv4.2
데이터 보호 파일 또는 디렉터리별 정책에 따른 미러링: 없음, 양방향 또는 삼방향
성능 (Hammerspace 수치, 5세대 TLC SSD, 400GbE, TCP)
읽기 처리량 썰매당 80GB/s
트레이당 400GB/s
쓰기 처리량, 미러링 없음 썰매당 78GB/s
트레이당 390GB/s
쓰기 처리량, 2방향 미러링 썰매당 39GB/s
트레이당 195GB/s
쓰기 처리량, 3방향 미러링 썰매당 26GB/s
트레이당 130GB/s
4K 랜덤 읽기 슬레드당 3백만 IOPS
트레이당 15만 IOPS
힘과 신체
최대 전력 썰매당 360W
트레이당 1,800W
Power Supplies 트레이당 듀얼 2,160W 티타늄
폼 팩터 1U 트레이, 깊이 106.64cm
1,200mm 랙이 필요합니다.
냉각 해수면에서 최대 유입 온도 40°C의 공기
IPMI, 레드피쉬
이용 가능 여부 (Availability) 지금 견적을 내겠습니다
2027년 상반기 출시 예정

티어 0 및 KV 캐시

Hammerspace는 OFP를 Tier 1으로, GPU 서버 내부에 이미 존재하는 NVMe로 구성된 Tier 0 뒤에 배치합니다. 이 Tier 0은 NFS를 통해 데이터를 내보내고 컴퓨팅 노드에 클라이언트나 에이전트가 없는 공유 클러스터 전체 계층으로 통합합니다. 여기에 기록된 데이터는 보호를 위해 클러스터 전체에 미러링되고 정책에 따라 다른 계층으로 이동됩니다. Hammerspace는 일반적인 패턴으로 학습 체크포인트를 로컬에 기록하고 시스템이 오래된 체크포인트를 객체 스토리지로 이동하도록 한다고 밝혔습니다. Hammerspace는 테스트 구성을 공개하지 않았지만, Tier 0이 외부 공유 스토리지에 비해 순차 대역폭이 4.4배 높고 지연 시간이 56% 낮다고 주장합니다.

KV 캐시 역할은 동일한 계층을 사용하는데, 이는 공유 저장소에서 대화의 계산된 컨텍스트를 다시 로드할 수 있는 추론 서버는 GPU에서 해당 토큰을 다시 계산할 필요가 없다는 논리에 기반합니다. Hammerspace는 캐시 관리자 역할을 하지 않으며, OFP가 뒤에 있는 풀링된 Tier 0 NVMe를 추론 소프트웨어의 캐시 관리자가 사용할 수 있는 POSIX 저장소로 제공합니다.

데이터 인텔리전스: 카탈로그, 딥스캔 및 자연어 쿼리

데이터 인텔리전스 계층은 데이터를 이동하지 않고 네임스페이스 내 모든 스토리지 시스템의 파일 및 객체 메타데이터를 색인화하는 카탈로그로 시작합니다. 두 번째 계층인 DeepScan은 파일을 열어 개인 정보, 금융 정보 및 보호 대상 의료 정보를 요청 시 또는 예약된 일정에 따라 검색하고, 검색 결과는 검색 가능한 태그로 변환됩니다. 쿼리는 고객이 선택한 LLM(로컬 라이프사이클 관리자)을 통해 자연어로 작성할 수 있습니다. 검색 결과는 Hammerspace에서 목표라고 부르는 기존 정책 엔진에 입력되므로 관리자는 교육 준비 완료 또는 특정 국가로 제한된 태그가 지정된 모든 파일을 찾아 해당 파일 집합에 대한 배치 규칙을 설정할 수 있습니다.

Hammerspace 데이터 시스템의 데이터 카탈로그 보기에는 사이트별 용량, 인덱스별 파일 수, 콘텐츠 유형 분포, 인덱스 증가율 및 파일 생성 시기가 표시되며, Hammerspace 제품 페이지에 샘플 데이터가 함께 제공됩니다.

목표는 공유, 볼륨, 디렉터리 또는 파일에 적용되는 선언적 규칙으로, 예를 들어 데이터를 30일 동안 변경 없이 이동하거나 세 곳에 복사본을 보관하는 것 등이 있습니다. 새로운 자동화 기능은 용량 임계값, 일정 및 이벤트와 같은 조건을 기반으로 이러한 목표를 실행하며, 변경 사항 승인 전에 미리 보기 단계를 거칩니다. 태그는 디렉터리 트리를 따라 상속되며 스토리지 시스템과 클라우드 간에 파일을 따라 이동합니다. 이 소프트웨어는 모든 공급업체의 파일 및 객체 스토리지를 지원하며 구조화된 데이터는 관리하지 않습니다.

Hammerspace 자동화 보기에서는 메트릭, 일정 및 이벤트 조건을 포함한 트리거 규칙 목록이 Hammerspace 제품 페이지에 샘플 데이터와 함께 표시됩니다.

초기 고객 및 전망

출시 당시 레퍼런스 고객은 암스테르담과 취리히에 사무실을 둔 임상 AI 기업인 카이코(Kaiko)입니다. 카이코는 영상 및 병리학 데이터를 기반으로 모델을 학습시킵니다. 카이코는 마이크로소프트 애저(Microsoft Azure)와 네뷸(Nebul), 네비우스(Nebius) GPU 클라우드에서 해머스페이스(Hammerspace)를 하나의 네임스페이스로 운영하고, GPU 노드의 NVMe를 학습용 티어 0으로 사용하며, 정책에 따라 체크포인트를 애저 블롭 스토리지(Azure Blob Storage)에 저장합니다. 해머스페이스에 따르면 카이코의 세 개 클러스터에서 수행되던 모든 머신러닝 엔지니어링 워크플로가 해머스페이스 시스템으로 이전되었습니다. 이 사례 연구에는 OFP 하드웨어는 포함되지 않습니다.

Hammerspace는 kaiko가 Nebius에서 GPU를 약 128개에서 1,000개 이상으로 확장하는 과정에서 해당 시스템을 도입했으며, Nebul 클라우드에 있던 기존 올플래시 NAS를 그대로 네임스페이스로 통합했다고 밝혔습니다. 또한, 익명의 한 하이퍼스케일 AI 연구소가 Lustre 관련 지원 티켓이 가장 많았던 1년 후, Lustre용으로 사용하던 Amazon FSx를 AWS의 30PB Hammerspace 클러스터로 교체했으며, 현재는 온프레미스 데이터 센터로 네임스페이스를 확장하고 있다고 설명했습니다. Hammerspace는 온프레미스 데이터 센터에서 대용량 파일 작업 속도가 약 3배 빨라졌다고 밝혔습니다.

OFP는 NVIDIA가 GTC에서 발표한 BlueField-4 STX 레퍼런스 아키텍처를 포함하여 스토리지 서버의 프로세서가 있던 자리에 DPU를 탑재하는 다른 설계 방식에 속합니다 . Hammerspace의 OFP는 하드웨어 없이도 실행되는 파일 시스템과 DPU를 결합한다는 점에서 차별화됩니다. Hammerspace는 SC26에서 해당 하드웨어를 시연할 예정이며, 가격은 아직 공개하지 않았습니다.

저희는 SC26에서 Hammerspace와 함께 OFP 슬레드와 트레이의 상세 설명 영상을 촬영했으며, 해당 영상은 기사가 게시되는 대로 이 기사에 추가할 예정입니다.

해머스페이스 데이터 시스템

해머스페이스 오픈 플래시 플랫폼

StorageReview에 참여

뉴스레터 | 유튜브 | 팟캐스트 ( 아이튠즈 / 스포티파이) | 인스타그램 | 트위터 | 틱톡 | RSS 피드

브라이언 빌러

Brian은 오하이오주 신시내티에 있으며 StorageReview.com의 수석 분석가이자 사장입니다.