CoreWeave는 타사 클라우드에서 대규모 AI 데이터 세트를 이전하는 조직을 위해 설계된 진정한 이그레스 비용 없는 데이터 마이그레이션 서비스인 Zero Egress Migration(0EM) 프로그램을 출시했습니다. 이 프로그램을 통해 고객은 CoreWeave 클라우드로 직접 데이터를 전송할 수 있습니다. 또한 CoreWeave는 AWS, Azure, Google Cloud, IBM, Alibaba 등의 공급업체에서 AI 워크로드를 처음 마이그레이션할 때 발생하는 이그레스 비용도 부담합니다.
0EM은 안전하고 고속이며 검증 가능한 데이터 이동에 중점을 둔 완전 관리형 서비스로 제공됩니다. CoreWeave는 안전한 데이터 경로, 성능 튜닝, 대규모 데이터 세트 무결성 검증을 포함한 엔드 투 엔드 프로세스를 조정합니다. 이러한 구조는 일반적으로 대규모 데이터 마이그레이션과 관련된 운영 위험과 내부 엔지니어링 오버헤드를 줄이는 동시에 상당한 비용 장벽인 이그레스 수수료를 제거합니다.
AI를 위한 단일 글로벌 데이터 세트
마이그레이션이 완료되면 데이터는 CoreWeave AI 객체 스토리지 에 저장됩니다 . CoreWeave AI 객체 스토리지는 여러 지역이나 공급업체에 분산된 조각난 복사본이 아닌 단일 글로벌 데이터 세트를 제공하도록 설계되었습니다. 이러한 아키텍처는 데이터 중복, 수동 계층화 및 여러 환경에 걸친 확산으로 인한 자본 및 운영 오버헤드를 줄이는 데 도움이 됩니다.
핵심 구성 요소는 CoreWeave의 로컬 객체 전송 가속기(LOTA) 기술입니다. LOTA는 데이터의 물리적 위치에 관계없이 GPU당 초당 최대 7GB의 처리량을 제공하도록 설계되었습니다. 실제로 이 기술은 훈련 및 추론 중에 GPU에 지속적으로 데이터를 공급하여 활용률을 높이고 유휴 시간을 줄이는 데 도움이 됩니다. AI 객체 스토리지와 LOTA의 조합은 멀티 클라우드 AI 파이프라인의 크로스 클라우드 유연성과 예측 가능한 성능을 모두 목표로 합니다.
레거시 클라우드 스토리지의 구조적 한계 해결
CoreWeave의 경영진은 기존 클라우드 스토리지 아키텍처가 클라우드 내부 및 클라우드 간 대용량 데이터셋의 신속한 이동이 필수적인 AI 시대에 적합하지 않다는 점을 명확히 밝혔습니다. 높은 이그레스(egress) 및 전송 수수료와 경직된 아키텍처는 AI 애플리케이션의 실험을 저해하고 실제 운영 배포 속도를 늦출 수 있습니다.
CoreWeave는 AI 객체 스토리지와 0EM 프로그램을 통해 데이터 이동성과 관련된 재정적, 물리적, 운영적 병목 현상을 제거함으로써 이러한 모델을 혁신하고자 합니다. AI 팀이 과도한 네트워크 요금이나 복잡한 수동 마이그레이션 프로젝트의 제약 없이 데이터를 가장 가치 있는 곳으로 이동할 수 있도록 지원하는 데 중점을 두고 있습니다.
운영 제어, 가시성 및 잠금 없음
0EM 프로그램은 완전한 전환을 요구하지 않고 기존 클라우드 전략과 함께 작동하도록 설계되었습니다. 고객은 마이그레이션 중 및 이후에도 현재 클라우드 제공업체의 활성 계정을 유지하여 멀티 클라우드 또는 하이브리드 아키텍처의 유연성을 유지할 수 있습니다. CoreWeave는 해지 페널티를 부과하지 않으며, 이는 공급업체 종속성에 대해 우려하는 기술 및 상업적 의사 결정권자에게 중요한 기능입니다.
운영 투명성을 지원하기 위해 CoreWeave는 데이터 전송 진행 상황, 처리량, 성능 지표 및 무결성 검사를 실시간으로 확인할 수 있는 마이그레이션 대시보드를 제공합니다. 이러한 수준의 모니터링은 프로덕션 AI 워크로드에 대한 규정 준수, 내부 감사 또는 엄격한 SLA 요건을 충족하기 위해 대규모 이전을 검증해야 하는 팀에 필수적입니다.
검증된 성능을 갖춘 통합 AI 플랫폼
0EM은 완전한 AI 중심 클라우드 스택을 구축하려는 CoreWeave의 광범위한 노력을 확장합니다. 이 플랫폼은 이미 고성능 컴퓨팅, 멀티 클라우드 호환 데이터 스토리지, 그리고 개발자가 대규모 AI 워크로드를 개발, 테스트 및 배포할 수 있도록 지원하는 소프트웨어 계층을 모두 포함하고 있습니다.
최근 CoreWeave는 사용자가 맞춤형 강화 학습 인프라를 구축하고 관리할 필요 없이 복잡한 학습 워크플로를 지원하는 완전 관리형 공개 강화 학습 기능인 ServerlessRL을 출시했습니다. CoreWeave의 기술력은 AI 워크로드에 대한 업계 최고 수준의 MLPerf 결과와 SemiAnalysis ClusterMAX 1.0 및 2.0의 플래티넘 등급을 포함한 업계 벤치마크를 통해 더욱 강화되었습니다. 이러한 등급은 장기적인 AI 인프라 파트너를 표준화하는 팀에게 중요한 AI 클라우드 성능, 효율성 및 안정성에 대한 기준으로 널리 인정받고 있습니다.
이용 가능 여부 (Availability)
CoreWeave의 0EM 프로그램이 오늘부터 모든 고객에게 정식으로 제공됩니다. 프로그램에 관심 있는 기업은 프로그램 웹페이지를 방문 하거나 CoreWeave의 영업 및 솔루션 엔지니어링 팀에 직접 문의하여 자세한 정보를 얻을 수 있습니다.
아마존