Don Capps, SPEC 스토리지 소위원회 위원장
SPEC(Standard Performance Evaluation Corp.)은 IT 관리자가 더 나은 구매, 구성 및 최적화 결정을 내리는 데 도움이 되도록 설계된 스토리지 솔루션 벤치마크의 주요 새 버전을 발표했습니다.
새로운 SPECstorage Solution 2020 벤치마크는 실제 애플리케이션과 실제 시나리오를 기반으로 합니다. 여기에는 인공 지능(AI) 및 유전체학을 위한 새로운 워크로드, 확장된 사용자 지정 워크로드 기능, 훨씬 더 나은 확장성, 벤치마크 결과를 표시하기 위한 통계적 시각화 메커니즘이 포함됩니다. 또한 벤치마크를 사용하기 쉽고 결과를 보다 효율적으로 제공하는 수십 가지 업그레이드가 있습니다.
실제 워크로드
SPECstorage Solution 2020 벤치마크 내의 워크로드는 XNUMX개의 서로 다른 시장에서 사용되는 애플리케이션을 나타냅니다. 각 워크로드에는 벤치마크 결과를 검증하기 위해 충족해야 하는 통과 실패 기준 세트가 있습니다. 기준의 예는 다음과 같습니다.
- 테스트 중인 스토리지 솔루션이 요청된 지속 평균 op_rate를 유지했는지 여부.
- 솔루션이 지정된 임계값 미만의 평균 대기 시간을 유지했는지 여부입니다.
- 솔루션이 워크로드의 하위 구성 요소 전체에서 동일한 작업 균형을 유지했는지 여부.
- 솔루션이 워크로드의 하위 구성 요소에 대해 특정 임계값 미만의 최대 대기 시간을 유지했는지 여부.
새로운 AI 워크로드는 COCO, Resnet50 및 CityScape 데이터셋을 실행하는 시스템에서 수집된 트레이스를 기반으로 하는 AI TensorFlow 이미지 처리 환경을 나타냅니다. 측정 지표는 정의된 합격/불합격 기준 하에서 유지될 수 있는 동시 작업 수 (하나의 완전한 워크플로를 구성하는 하위 구성 요소 집합)를 기준으로 합니다.
새로운 유전체학 워크로드는 상업 및 연구 시설에서 유전자 분석을 수행하는 데 사용되는 I/O 작업의 흔적에서 비롯됩니다. 데이터는 원본 게놈 데이터를 포함하지 않도록 삭제되었습니다. 메트릭은 워크로드의 통과 실패 기준에 따라 유지 관리할 수 있는 동시 작업 수를 기반으로 합니다.
2014년 2월에 발표된 SPEC SFS 2017 SPXNUMX 벤치마크에서 세 가지 워크로드가 이월되었습니다.
- EDA(전자 설계 자동화) 워크로드는 프런트엔드 및 백엔드 처리를 포함하여 혼합된 EDA 애플리케이션의 일반적인 동작을 나타냅니다. 메트릭은 정의된 통과/실패 기준 세트 내에서 완료할 수 있는 작업 수를 기반으로 합니다.
- 소프트웨어 빌드 환경 워크로드는 실제 애플리케이션의 분석 및 시스템 추적에서 파생된 메타데이터 집약적 테스트로 구성됩니다. 지표는 합격-불합격 기준에 따라 완료할 수 있는 동시 빌드 수를 기반으로 합니다.
- 비디오 데이터 수집 워크로드(VDA)는 감시 카메라와 같이 시간에 민감한 소스에서 수집한 데이터를 저장하는 애플리케이션을 시뮬레이션합니다. 지표는 합격-불합격 기준에 따라 캡처할 수 있는 비디오 스트림 수를 기반으로 합니다.
맞춤형 워크로드
새로운 벤치마크를 통해 사용자는 기존 워크로드를 사용자 정의하거나 새 워크로드를 생성하여 스토리지 성능 문제에 대한 통찰력을 얻을 수 있습니다.
사용자 지정된 워크로드는 워크플로에서 이 조합을 사용하는 애플리케이션에 대해 Unix 및 Windows 부하 생성기의 조합을 수용할 수 있습니다. 이 조합의 예로는 센서 데이터를 수집하고 SMB를 사용하여 저장하는 Windows 시스템과 Unix 기반 컴퓨팅 팜이 NFS, Lustre, GPFS 또는 기타 파일 시스템 기술을 사용하여 데이터를 분석하는 것이 있습니다.
SPECstorage Solution 2020 벤치마크 내의 정교한 동기화 메커니즘은 지리적으로 분산된 모든 로드 생성 프로세스를 XNUMX밀리초 미만의 해상도로 동기화 상태로 유지합니다.
더 적은 제약으로 대규모 확장
SPECstorage Solution 2020의 새로운 내부 IPC 메커니즘은 TCP 포트 및 DNS 조회 수를 크게 줄여 확장성, 안정성, 시작 및 런타임 성능을 향상시킵니다. 이전 버전의 60,000개 로드 생성 프로세스에서 전 세계에 배포할 수 있는 4만 개 이상의 프로세스로 확장되었습니다.
정교한 동기화 메커니즘은 지리적으로 분산된 모든 부하 생성 프로세스를 XNUMX밀리초 미만의 해상도로 동기화 상태로 유지합니다.
새로운 확장 효율성은 클라우드 기반 스토리지 솔루션을 테스트할 때 특히 중요합니다. 클라우드 공급자 사이에서 TCP 포트는 희소한 리소스이며 대부분의 가상 머신은 기껏해야 수천 개만 수용할 수 있기 때문에 이것은 중요한 발전입니다. 새로운 벤치마크에는 1,000개 이상의 TCP 포트가 필요하지 않습니다. 이를 통해 사용자는 클라우드 제약 없이 최대 4백만 개의 프로세스로 확장할 수 있습니다.
SPECstorage Solution 2020의 새로운 통계 시각화 메커니즘을 통해 사용자는 런타임 카운터를 추출하고 시각화를 위해 데이터베이스에 연결할 수 있습니다.
더 큰 통찰력을 위한 시각화
SPECstorage Solution 2020 내의 새로운 통계 시각화 메커니즘을 통해 사용자는 런타임 카운터를 추출하고 시각화를 위해 Graphite, Carbon 또는 Grafana와 같은 데이터베이스에 연결할 수 있습니다. 이를 통해 테스트 중인 시스템의 동작 및 작업 세부 정보에 대한 더 큰 통찰력을 얻을 수 있습니다.
지금 다운로드 가능
SPEC 스토리지 솔루션 2020 벤치마크는 SPEC 웹사이트에서 즉시 다운로드 가능하며 가격은 2,000달러입니다. 자격을 갖춘 연구 및 학술 기관에는 할인 혜택이 제공됩니다. 새로운 벤치마크 결과는 이전 SPEC 스토리지 벤치마크 결과와 비교할 수 없습니다.
벤치마크 개발에 적극적으로 참여하는 SPEC 기업 회원에는 Dell, IBM, Intel, iX Systems, NetApp, Pure Storage 및 WekaIO가 포함됩니다. 지원 개인 기여자는 Udayan Bapat, Sorin Faibish 및 Brian Pawlowski를 포함합니다.
# # #
Don Capps는 스토리지 시스템의 성능 엔지니어링 분야에서 30년 이상의 경험을 가지고 있습니다. 그는 Netapp의 성능 엔지니어입니다. 컴퓨터 스토리지 시스템의 성능을 측정하기 위한 무료 소프트웨어를 생산 및 배포하는 비영리 조직인 Iozone.org의 창립자; SPEC(Standard Performance Evaluation Corp.) 스토리지 소위원회 의장입니다.
아마존