StorageReview Lab, 202조 자릿수로 Pi 계산 세계 기록 경신

놀라운 계산 능력을 보여주는 StorageReview Lab 팀은 파이를 놀라운 202,112,290,000,000자리로 계산하여 연속 세계 기록을 세웠습니다. 이 놀라운 성과는 팀이 보유하고 있던 이전 기록인 105조 자릿수를 넘어섰습니다. 이는 현대 고성능 컴퓨팅과 적절하게 설계된 상용 하드웨어 플랫폼의 비교할 수 없는 기능을 보여줍니다.

전례 없는 계산 능력

StorageReview Lab 팀은 이러한 성과를 달성하기 위해 고도로 발전된 설정을 활용했습니다. Intel Xeon 8592+ CPU 활용 및 솔리드다임 P5336 61.44TB NVMe SSD를 사용하여 팀은 85일 동안 거의 연속적인 계산을 실행했으며 1.5개의 Solidigm SSD에서 거의 28페타바이트에 달하는 공간을 소비했습니다. 이 획기적인 프로젝트는 컴퓨팅 능력과 효율성 모두에서 상당한 발전을 보여줍니다.

StorageReview Lab Team의 시스템 설계자인 Jordan Ranous는 “이 새로운 기록은 오늘날 고성능 컴퓨팅 인프라의 뛰어난 잠재력을 강조합니다.”라고 말했습니다. "이 이정표를 달성함으로써 우리는 계산 수학의 새로운 기준을 세울 뿐만 아니라 다양한 과학 및 엔지니어링 분야에 걸쳐 미래 혁신을 위한 길을 닦고 있습니다."

2024년 XNUMX월 StorageReview Lab 팀은 파이를 계산하여 세계 기록을 달성했습니다. 105조 자리. 팀은 256개의 코어와 거의 페타바이트에 달하는 Solidigm QLC SSD를 갖춘 듀얼 프로세서 AMD EPYC 시스템을 활용하여 메모리 및 스토리지 제한을 포함한 중요한 기술 문제를 해결했습니다. 이 이정표는 최신 하드웨어의 기능을 입증하고 고성능 컴퓨팅 시스템 최적화에 대한 귀중한 통찰력을 제공했습니다.

StorageReview Lab 이사인 Kevin O'Brien은 "Solidigm 드라이브와 Dell PowerEdge R760은 완벽하게 함께 작동했을 뿐만 아니라 이 새로운 기록의 거의 무간섭 특성은 지난 기록 시도의 위험 이후 환영받는 변화였습니다."라고 말했습니다. “105까지의 마지막 테스트를 거친 후, 큰 기록을 위해 우리가 했던 플랫폼을 선택하게 되어 기쁩니다.”라고 그는 계속했습니다. 이전 105조 자릿수 시도 및 과제에 대한 자세한 내용을 보려면 전체 기사를 읽어보세요. LINK.

CompSci 및 수학 수업

처음 대용량 SSD를 테스트하는 재미있는 방법을 찾기 시작했을 때 확실한 답은 CPU 및 시스템 리뷰에 있었습니다: y-cruncher. 광범위한 계산을 위해 스왑 공간을 활용할 때 필요한 공간은 자릿수에서 대략 4.7:1이므로 100조 자릿수에는 약 470TiB의 공간이 필요합니다. 수학과 컴퓨터 과학 잡초에 너무 깊이 들어가지 않고 Chudnovsky 알고리즘인 y-cruncher는 모듈 함수 및 타원 곡선 이론에서 파생된 빠르게 수렴되는 계열을 기반으로 합니다. 알고리즘의 핵심은 다음과 같은 무한 계열에 의존합니다.

100T 및 105T 계산과 관련하여 우리가 받은 가장 큰 질문은 “좋아요, 별거 아닙니다. 왜 이렇게 시간이 오래 걸리고 그렇게 많은 메모리가 필요한 걸까요?” 이 질문은 오픈 소스와 Alex Yee의 프로그래밍 기능에 대한 다른 성가신 우려 사항 중 하나였습니다. 한발 물러서서 시스템 수준에서 이를 살펴보겠습니다.

100조와 같은 광범위한 숫자의 Pi를 계산하려면 관련된 대규모 산술 연산으로 인해 상당한 공간이 필요합니다. 문제는 주로 큰 숫자를 곱하는 데 있으며, 이는 본질적으로 상당한 메모리를 필요로 합니다. 예를 들어, N자리 숫자를 곱하는 최고의 알고리즘에는 약 4N바이트의 메모리가 필요하며, 대부분은 스크래치 공간으로 사용됩니다. 이 메모리는 계산 중에 여러 번 액세스해야 하므로 프로세스가 CPU 바인딩 작업이 아닌 디스크 I/O 집약적 작업으로 전환됩니다.

Pi의 많은 자릿수를 계산하는 데 널리 사용되는 Chudnovsky 공식은 광범위한 산술 연산을 요구합니다. 이러한 곱셈, 나눗셈 및 제곱 연산은 종종 큰 곱셈으로 축소됩니다. 역사적으로 슈퍼컴퓨터는 AGM 알고리즘을 사용했는데, 이는 속도는 느리지만 구현하기가 더 쉬웠고 수많은 기계의 강력한 힘으로부터 이익을 얻었습니다. 그러나 현대의 발전으로 인해 병목 현상이 컴퓨팅 성능에서 메모리 액세스 속도로 바뀌었습니다.

프로세서 산술 논리 장치(ALU) 및 부동 소수점 장치(FPU)는 이러한 큰 곱셈 수를 종이에 있는 수동 곱셈과 유사하게 처리하여 더 작고 관리 가능한 작업으로 나눕니다. 이전에는 Pi 계산이 컴퓨팅에 국한되었지만 오늘날의 컴퓨팅 성능은 메모리 액세스 속도를 능가하므로 Pi 기록을 설정하는 데 스토리지와 안정성이 중요한 요소가 되었습니다. 예를 들어, 128코어 Intel 시스템과 256코어 AMD Bergamo 간에는 성능 차이가 거의 관찰되지 않았습니다. 디스크 I/O 효율성에 중점을 두었습니다.

Solidigm SSD는 고유한 속도 때문이 아니라 뛰어난 저장 밀도 때문에 이러한 계산에서 중요한 역할을 합니다. 소비자급 NVMe 드라이브는 작은 볼륨에 최대 4TB까지 저장할 수 있는 반면, 기업용 SSD는 이러한 칩을 쌓아서 훨씬 더 큰 용량을 확보할 수 있습니다. QLC NAND는 다른 유형의 플래시 메모리보다 느릴 수 있지만 이러한 고밀도 SSD의 병렬성은 더 높은 총 대역폭을 제공하므로 대규모 Pi 계산에 이상적입니다.

Solidigm QLC NVMe SSD, 광기를 가능하게 하다

좋아, 당신이 아직 깨어 있고 여기 나와 함께 있다면 당신이 알아야 할 것은 계산 숫자가 너무 커서 메모리에 맞지 않을 때 컴퓨터는 다중 정밀도 산술을 위해 소프트웨어 알고리즘을 사용해야 한다는 것입니다. 이러한 알고리즘은 큰 숫자를 관리 가능한 덩어리로 나누고 특수 기술을 사용하여 분할을 수행합니다. 이곳은 솔리드다임 P5336 61.44TB NVMe SSD가 등장합니다. y-cruncher는 이러한 관리 가능한 청크를 가져와 먼저 시스템 메모리에 축적한 다음 스크래치 드라이브 공간으로 교체합니다.

기억하세요. 스왑에는 약 4.7:1이 필요합니다. 위의 무서운 공식의 각 부분은 아주 많은 비트로 표현되어야 하기 때문입니다.

y-cruncher에는 필요한 드라이브 공간(여전히 disk*cough*로 표시됨) 크기에 대한 내장 추정기가 포함되어 있으며 이번 실행과 과거 실행에서 완벽하게 정확한 것으로 나타났습니다.

HDD나 객체 스토리지를 추가할 수도 있지만 원시 크기는 매우 복잡한 방정식의 한 부분일 뿐입니다. 첫 번째 라운드에서요. 컴퓨팅 장치에 가까운 충분히 크고 빠른 스토리지를 확보하는 능력은 요즘 AI의 급증과 함께 StorageReview에서 우리 삶 전반에 걸쳐 반복되는 주제입니다. 스왑 공간의 성능은 이 계산에서 가장 큰 병목 현상입니다. 직접 연결 NVMe는 사용 가능한 최고의 성능을 제공하며, 일부 옵션은 장치당 가장 빠른 처리량을 제공할 수 있지만, 전체적으로 우리의 대규모 밀도가 높은 QLC 어레이는 작업을 능가했습니다.

소비자 드라이브 및 CPU 성능. 기록 시스템이 아님

y-cruncher에는 모든 레버를 당기고 손잡이를 조정하여 디스크 배열에 가장 적합한 성능 설정을 찾을 수 있는 벤치마크가 내장되어 있습니다. 이것은 매우 중요한. 위의 스크린샷은 벤치마크가 CPU의 처리 속도와 SSD 성능에 대한 지표와 함께 이 소비자 시스템에 대한 피드백을 제공한다는 것을 보여줍니다.

알렉스는 사용 가능한 일부 광범위한 문서, 하지만 요약하자면, 우리는 몇 주 동안의 테스트를 통해 y-cruncher가 드라이브와 직접 상호 작용하도록 하는 것이 가장 좋은 방법이라는 것을 발견했습니다. 네트워크 대상, SAS RAID 카드 뒤의 드라이브, NVMe RAID 카드 및 iSCSI 대상을 테스트했습니다. y-cruncher에 하드웨어 제어 권한을 부여하면 밤낮으로 성능이 향상됩니다. iSCSI도 허용 가능한 것으로 보이지만 해당 상호 작용에 "직접 IO"를 활용할 수 있는 출력 파일에 대해서만 테스트했습니다. 스왑 모드 RAID 코드는 상대적으로 잘 생각되어야 하며 테스트 및 개발자와의 대화를 통해 낮은 수준의 드라이브와 작동한다는 것을 추론할 수 있습니다.

61.44TB Solidigm 드라이브는 해당 분야의 많은 문제에 대한 최고의 답변으로 떠오르기 시작했습니다. 시스템에서 벤치마크를 실행하면 드라이브가 읽기 및 쓰기 모두에 대해 사양에 맞게 성능을 발휘하는 것을 볼 수 있습니다. 우리는 최적의 2:1 드라이브 대 컴퓨팅 비율에 근접할 수 있도록 Intel CPU를 특별히 선택했습니다. 이것이 최적의 비율이므로 드라이브가 수행될 때까지 CPU에서 시간을 낭비하지 않습니다. 드라이브 기술이 더 빨라짐에 따라 더 많은 코어 수의 CPU를 선택하여 더 광범위하고 빠른 실행을 수행할 수 있습니다.

"맞춤형" Dell PowerEdge R760 서버

속담처럼 세 번째는 매력입니다. 이것은 Pi와 함께 기록을 깨뜨린 첫 번째 로데오가 아닙니다. 우리는 최고의 Pi 플랫폼을 구축하기 위해 처음 두 번의 반복에서 교훈을 얻었습니다. 첫 번째 빌드에서는 2개의 NVMe 베이와 16개의 내부 SSD 슬레드가 있는 30.72U 서버를 활용했습니다. 5316TB Solidigm P2 SSD를 사용하여 y-cruncher용 스왑 스토리지를 포함했지만 출력 파일에는 HDD 기반 스토리지 서버를 활용해야 했습니다. 특히 쓰기 단계가 끝날 때 최적이 아니었습니다. 우리의 두 번째 플랫폼은 외부 NVMe JBOF가 연결된 동일한 서버를 사용하여 추가 NVMe 베이를 제공했지만 민감한 케이블 연결과 불균형한 성능이 희생되었습니다. 두 플랫폼 모두의 단점은 추가 전력 및 추가 실패 지점을 희생하면서 전체 Y-Cruncher 실행 전반에 걸쳐 외부 하드웨어에 의존해야 한다는 점이었습니다.

이 실행을 위해 우리는 하나의 완전 직접 NVMe 단일 서버를 활용하고 하나의 판금 지붕 아래에 y-cruncher 스왑 스토리지와 출력 스토리지를 위한 충분한 공간을 갖고 싶었습니다. 760베이 NVMe 다이렉트 드라이브 백플레인을 갖춘 Dell PowerEdge R24을 만나보세요. 이 플랫폼은 내부 PCIe 스위치를 활용하여 모든 NVMe 드라이브가 서버와 동시에 통신하도록 하여 추가 하드웨어나 RAID 장치가 필요하지 않게 합니다. 그런 다음 연구실 환경에서 여러 R760의 PCIe 라이저 구성을 결합하여 추가 U.2 탑재 NVMe SSD를 위한 후면에 760개의 PCIe 슬롯을 제공했습니다. 보너스는 다른 RXNUMX에서 더 큰 방열판을 제거하여 가능한 한 많은 터보 부스트 헤드룸을 제공한다는 것입니다. 직접 액체 냉각은 이번 실행에서 구현하기에는 한 달 늦게 우리 연구실에 들어왔습니다.

“StorageReview Lab Team은 202를 사용하여 5조 자릿수 이상의 파이 계산을 달성했습니다.^th Gen Intel Xeon 프로세서는 이러한 CPU의 성능과 효율성을 강조합니다. 5개의 코어 수 증가와 고급 성능 기능 활용^th Gen Xeon 프로세서인 이 이정표는 계산 수학의 새로운 벤치마크를 설정하고 다양한 과학 및 엔지니어링 워크로드 전반에 걸쳐 혁신을 위한 길을 계속해서 열어가고 있습니다.” 말했다 Intel의 5대 총괄 책임자인 Suzi Jewett^th Gen Intel Xeon 프로세서 제품

기술적으로는 이번 실행에 사용된 것과 똑같은 Dell 구성을 주문할 수 있지만, 그것은 주변에 놓여 있어서 함께 조립할 필요가 없는 구성이었습니다. (아마 Michael은 이 정확한 구성, 맞춤형 페인트 및 SR 로고를 사용하여 R760의 한정판 "Pi" 배치를 실행할 것입니다.)

이 실행에서는 전원 공급 장치 크기도 중요했습니다. 대부분의 사람들은 즉시 CPU가 대부분의 전력을 소비한다고 생각하지만, 한 지붕 아래에 28개의 NVMe SSD를 두는 것은 전력에 상당한 영향을 미칩니다. 우리 빌드는 2400W PSU를 활용했는데 결과적으로는 거의 작동하지 않았습니다. 시스템이 하나의 전원 공급 장치 연결을 끊으면 전원이 부족해지는 거의 임계 수준의 전력 소모 순간이 몇 번 있었습니다. 이것은 초기에 히트를 쳤습니다. CPU 부하가 최고조에 달하는 동안 전력 소비도 급증했고 시스템은 모든 SSD에 대한 I/O 활동을 늘렸습니다. 다시 이 작업을 수행해야 한다면 2800W 모델을 선호했을 것입니다.

성능 사양

기술 하이라이트

계산된 총 자릿수: 202,112,290,000,000
사용 된 하드웨어: Intel Xeon 760+ CPU 2개, 8592TB DDR1 DRAM, 5x Solidigm 28TB P61.44을 탑재한 Dell PowerEdge R5336
소프트웨어 및 알고리즘: y-cruncher v0.8.3.9532-d2, Chudnovsky
데이터 저장매체: 드라이브당 3.76PB 쓰기, 스왑 어레이용 디스크 82.7개 전체에서 22PB
계산 기간: 100.673 일

y-cruncher 원격 측정

논리적 최대 체크포인트: 305,175,690,291,376(278TiB)
논리적 최대 디스크 사용량: 1,053,227,481,637,440(958TiB)
논리 디스크 읽기 바이트 수: 102,614,191,450,271,272(91.1PiB)
쓴 논리 디스크 바이트: 88,784,496,475,376,328(78.9 PiB)
시작일: 6년 16월 09일 화요일 07:2024:XNUMX
종료일: 20년 05월 43일 월요일 16:2024:XNUMX
파이: 7,272,017.696초, 84.167일
총 계산 시간: 8,698,188.428초, 100.673일
시작부터 끝까지 벽 시간: 8,944,449.095초, 103.524일

Pi의 알려진 가장 큰 숫자는 2이며 위치는 202,112,290,000,000(XNUMX억XNUMX조,XNUMX억,XNUMX억XNUMX천만)입니다.

더 넓은 시사점

이렇게 방대한 자릿수로 파이를 계산하는 것은 추상적인 과제로 보일 수 있지만, 이 프로젝트 중에 개발된 실제 응용 프로그램과 기술은 광범위한 의미를 갖습니다. 이러한 발전은 암호화부터 물리학 및 공학 분야의 복잡한 시뮬레이션에 이르기까지 다양한 계산 작업을 향상시킬 수 있습니다.

최근 202조 자릿수 파이 계산은 스토리지 밀도와 총 소유 비용(TCO)의 상당한 발전을 강조합니다. 우리의 설정은 단일 1.720U 섀시 내에서 놀라운 2페타바이트의 NVMe SSD 스토리지를 달성했습니다. 이러한 밀도는 특히 전체 CPU 및 드라이브 부하에서 최대 2.4kW에 불과한 총 전력 소비를 고려하면 데이터 저장 기능의 도약을 나타냅니다.

이러한 에너지 효율성은 훨씬 더 많은 전력을 소비하고 과도한 열을 발생시키는 기존 HPC 기록 실행과 대조됩니다. 고밀도 로컬 스토리지에 비해 저용량 공유 스토리지를 확장해야 하는 경우 스케일 아웃 스토리지 시스템에 대한 추가 노드를 고려하면 전력 소비가 기하급수적으로 증가합니다. 열 관리는 특히 소규모 데이터 센터와 서버실의 경우 매우 중요합니다. 기존 HPC 기록 시스템을 냉각하는 것은 작은 일이 아니며, 단독으로 실행되는 장비보다 더 많은 전력을 소비할 수 있는 데이터 센터 냉각기가 필요합니다. 전력 소비와 열 출력을 최소화함으로써 우리의 설정은 중소기업을 위한 보다 지속 가능하고 관리하기 쉬운 솔루션을 제공합니다. 보너스로 대부분의 실행은 신선한 공기 냉각으로 수행되었습니다.

이를 이해하기 위해 네트워크로 연결된 공유 스토리지와 최적화되지 않은 플랫폼을 사용하는 사람들이 직면하는 어려움을 상상해 보십시오. 이러한 설정에는 온도를 유지하기 위해 하나 이상의 데이터 센터 냉각기가 필요합니다. 이러한 환경에서는 절약된 모든 와트는 냉각 필요량과 운영 비용 절감으로 이어지므로 고밀도, 저전력 접근 방식이 이상적인 선택입니다. 기록적인 실행을 위해 간결하고 효율적인 플랫폼을 실행하는 데 따른 또 다른 중요한 이점은 배터리 백업 하드웨어로 전체 설정을 보호한다는 것입니다. 앞서 언급했듯이 컴퓨팅 서버, 스위칭, 스토리지 서버, 냉각기 및 워터 펌프를 일년 중 상당 기간 동안 작동 상태로 유지하려면 배터리 백업이 필요합니다.

전반적으로, 이 기록적인 성과는 현재 HPC 기술의 잠재력을 보여주고 현대 컴퓨팅 환경에서 에너지 효율성과 열 관리의 중요성을 강조합니다.

정확성 보장: Bailey-Borwein-Plouffe 공식

파이를 202조 자리까지 계산하는 것은 기념비적인 작업이지만 해당 숫자의 정확성을 보장하는 것도 마찬가지로 중요합니다. 여기서 Bailey-Borwein-Plouffe(BBP) 공식이 적용됩니다.

BBP 공식을 사용하면 앞의 모든 숫자를 계산할 필요 없이 16진수(기본 XNUMX) 형식으로 파이의 이진수를 확인할 수 있습니다. 이는 대규모 계산의 섹션을 교차 확인하는 데 특히 유용합니다.

두 가지 검증 계산.

간단한 설명은 다음과 같습니다.

16진수 출력: 먼저 주 계산 중에 파이의 숫자를 16진수로 생성합니다. BBP 공식은 XNUMX진수로 된 임의의 개별 숫자 파이를 직접 계산할 수 있습니다. GPUPI와 같은 다른 프로그램으로 이 작업을 수행할 수 있지만 y-cruncher에도 내장 기능이 있습니다. 오픈 소스 접근 방식을 선호하는 경우 공식은 잘 알려져 있습니다.
교차검증: BBP 공식을 사용하여 파이의 16진수 특정 위치를 독립적으로 계산하여 이러한 결과를 기본 계산과 비교할 수 있습니다. 일치하면 전체 시퀀스가 정확하다는 것을 강력하게 나타냅니다. 우리는 이 교차 점검을 6번 이상 수행했습니다. 여기 그 중 두 개가 있습니다.

예를 들어 기본 계산에서 여러 지점에서 BBP 공식에서 얻은 것과 동일한 16진수 숫자가 생성되는 경우 숫자의 정확성을 자신있게 주장할 수 있습니다. 이 방법은 단지 이론적인 것이 아닙니다. 이는 모든 중요한 pi 계산에 실질적으로 적용되어 결과의 견고성과 신뢰성을 보장합니다.

R= 공식 실행 결과, V= 검증 결과

R: f3f7e2296 822ac6a8c9 7843dacfbc 1eeb4a5893 37088*
V: *3f7e2296 822ac6a8c9 7843dacfbc 1eeb4a5893 370888

기민한 독자라면 스크린샷과 위의 비교에서 확인된 내용이 약간 다르다는 점을 알아차릴 것입니다(*). 꼭 필요한 것은 아니지만 100진수는 마지막에 영향을 받기 때문에 실행이 일치하는지 확인하기 위해 몇 가지 다른 위치(예: 105조 및 XNUMX조 자릿수)도 무작위로 검사했습니다. 그러는 동안 이론적으로 파이의 소수점 이하 자릿수를 계산하는 것이 가능합니다. 유사한 방법을 사용하면 Chudnovsky 수학을 수행하여 모든 값을 얻는 것보다 단순한 100억 자릿수를 넘는 정밀도를 갖거나 그렇게 하는 것이 계산적으로 효율적인지 확실하지 않습니다. (Eric Weisstein이 이 내용을 본다면 연락해 주세요. 한 번 시도해 보고 싶습니다.)

이 수학적 교차 확인 프로세스를 통합함으로써 우리는 기록적인 202조 자릿수 파이 계산의 무결성을 보장하고 계산 정밀도와 과학적 정확성에 대한 헌신을 입증할 수 있습니다.

앞서가는 길

StorageReview Lab Team이 파이를 202조 자릿수 이상으로 계산한 것은 고성능 컴퓨팅 및 스토리지 기술의 놀라운 발전을 입증하는 것입니다. Dell PowerEdge R8592 및 Solidigm 760TB QLC NVMe SSD에서 Intel Xeon 61.44+ CPU를 활용하는 이 기록적인 업적은 전례 없는 효율성으로 복잡하고 리소스 집약적인 작업을 처리하는 최신 하드웨어의 기능을 강조합니다. 프로젝트의 성공은 StorageReview 팀의 역량을 보여줄 뿐만 아니라 계산 수학과 기타 과학 분야의 경계를 넓힐 수 있는 오늘날의 HPC 인프라의 잠재력을 강조합니다.

“이 새로운 Pi 세계 기록은 이 컴퓨팅 작업량이 오늘날 우리가 보고 있는 많은 AI 작업량만큼 강렬하기 때문에 흥미로운 성과입니다. Solidigm D5-P5336 61.44TB SSD는 초고용량, PCIe 4 포화 읽기 성능 및 높은 페타바이트 쓰기의 강력한 조합이 오늘날 가장 까다로운 일부 애플리케이션을 견디고 발휘할 수 있다는 것을 다시 한번 입증했습니다.”라고 말했습니다. Greg Matson, Solidigm 데이터 센터 스토리지 그룹 부사장. "Dell Technologies의 파트너 및 StorageReview의 전문가와 함께 Pi를 계산하는 또 다른 기록적인 시도를 할 수 있는 기회를 갖게 되어 매우 기쁩니다."

이러한 노력은 또한 스토리지 밀도 및 에너지 효율성 최적화에 대한 귀중한 통찰력을 제공하여 보다 지속 가능하고 관리하기 쉬운 컴퓨팅 솔루션을 위한 길을 열어줍니다. HPC의 가능성을 계속 탐구하면서 이 프로젝트에서 얻은 교훈은 의심할 여지 없이 암호화에서 엔지니어링에 이르기까지 다양한 분야에 도움이 되는 미래 혁신을 주도할 것입니다. StorageReview Lab Team의 성과는 하드웨어와 전문 지식의 올바른 조합을 통해 과학적 발견과 기술 발전의 새로운 차원에 도달할 수 있음을 보여주는 컴퓨팅 역사의 랜드마크로 자리잡고 있습니다.

감사의

StorageReview 랩 팀은 이 프로젝트에 대한 변함없는 지원과 기여에 대해 Solidigm, Dell Technologies, Intel 및 y-cruncher Alex Yee에게 감사드립니다.

StorageReview에 참여