Firma Spectra Logic została wybrana na dostawcę biblioteki taśmowej do wdrożenia nowego, znaczącego archiwum w Texas Advanced Computing Center (TACC) na Uniwersytecie Teksańskim w Austin. Biblioteki taśmowe Spectra TFinity Plus będą stanowić podstawę długoterminowego przechowywania danych dla Ranch, systemu archiwizacji nowej generacji TACC, który będzie obsługiwał Horizon, przyszły system NSF Leadership-Class Computing Facility w tym ośrodku.
Oczekuje się, że Horizon będzie największym akademickim superkomputerem dedykowanym otwartym badaniom naukowym na świecie. Dzięki przewidywanemu dziesięciokrotnemu wzrostowi wydajności symulacji i stukrotnemu rozszerzeniu możliwości sztucznej inteligencji w porównaniu z obecnymi systemami, Horizon będzie generował ogromne ilości danych, które muszą być niezawodnie i ekonomicznie przechowywane przez dekady. Ranch, oparty na technologii Spectra TFinity Plus, został zaprojektowany z myślą o zapewnieniu tej eksabajtowej podstawy archiwizacji.
Wdrożenie to zostało podkreślone na konferencji SC25, gdzie firma Spectra Logic zaprezentowała, w jaki sposób jej biblioteki taśmowe stanowią podstawę ekosystemu Horizon i umożliwiają dokonywanie odkryć naukowych na szeroką skalę w różnych dziedzinach badań.
Strategiczne partnerstwo na rzecz wiodącej klasy rozwiązań HPC i sztucznej inteligencji
TACC wybrało połączone rozwiązanie firm Spectra Logic, Dell Technologies i Versity do ochrony i zarządzania danymi Horizon. Nowe archiwum Ranch to jeden z największych systemów archiwizacji dostarczonych dotychczas przez firmę Dell i jest pozycjonowane jako architektura referencyjna dla środowisk o wysokiej wydajności obliczeniowej i intensywnym wykorzystaniu sztucznej inteligencji.
Zbudowany na bazie Dell AI Factory we współpracy z firmą NVIDIA , Horizon zapewni badaczom bezprecedensowe możliwości w zakresie obliczeń o wysokiej wydajności (HPC) i sztucznej inteligencji (AI), pozwalające im stawić czoła złożonym wyzwaniom, od zmian klimatycznych po przełomy medyczne i fizykę fundamentalną. Superkomputer zapewni wydajność i niezawodność niezbędne badaczom do poszerzania granic odkryć w różnych dyscyplinach.
Sercem Horizon są skalowalne systemy Dell Rack Scalable Systems (IRSS) z serwerami Dell PowerEdge chłodzonymi bezpośrednio cieczą, wyposażonymi w platformę NVIDIA Grace Blackwell, procesory NVIDIA Vera z 1 milionem rdzeni oraz 4,000 procesorów graficznych NVIDIA połączonych za pomocą technologii NVIDIA Quantum-X800 InfiniBand.
Kierownictwo TACC podkreśliło znaczenie niezawodności, integralności danych i przewidywalnej wydajności dla Horizon, biorąc pod uwagę jego rolę we wspieraniu otwartej nauki w skali krajowej i globalnej. Połączone rozwiązanie wykorzystuje sprawdzone, utwardzone w warunkach produkcyjnych komponenty, które są już wykorzystywane w wiodących centrach HPC i laboratoriach krajowych. Skupienie się na dojrzałej technologii klasy korporacyjnej zmniejsza ryzyko wdrożenia i upraszcza bieżące operacje dla zespołów technicznych TACC.
Prezes Spectra Logic podkreślił, że platforma TFinity Plus idealnie wpisuje się w wymagania Horizon, powołując się na gęstość, odporność i historię operacyjną platformy w środowiskach o znaczeniu krytycznym. W miarę jak sztuczna inteligencja i symulacje na dużą skalę napędzają wzrost danych, biblioteki TFinity Plus mają zapewnić TACC skalowalną warstwę archiwizacji, którą można rozbudować w oparciu o wiele generacji technologii.
Horizon and Ranch: Architektura na skalę długoterminową
Platforma Horizon, której pełna produkcja planowana jest na 2026 rok, została zaprojektowana z myślą o przełomowych odkryciach w dziedzinie fizyki, klimatologii, nauk przyrodniczych, inżynierii i badań nad sztuczną inteligencją opartą na danych. Archiwum Ranch będzie pełnić funkcję długoterminowej warstwy retencyjnej dla tych obciążeń, zapewniając:
- Poziom eksabajta pojemność dla zimnych i chłodnych danych
- Zoptymalizowany pod kątem kosztów przechowywanie zestawów danych o długim okresie istnienia
- Wysoka trwałość danych z ochroną wielokopijową i taśmową
- Integracja z TACC szersza pamięć masowa i struktura obliczeniowa dzięki Versity ScoutAM
Łącząc gęstą pamięć taśmową, skalowalne warstwy obiektów i bloków oraz zarządzanie danymi oparte na regułach, TACC pozycjonuje Ranch jako rozszerzalną platformę, która może ewoluować wraz z przyszłymi technologiami nośników i napędów bez konieczności wprowadzania zakłóceń w architekturze.
Spectra TFinity Plus: Podstawa taśm o skali eksabajtów
Sercem Ranch są dwie biblioteki taśmowe Spectra TFinity Plus. Konfiguracja początkowa składa się z:
- Dwie 15-klatkowe biblioteki taśmowe TFinity Plus
- 20 napędów taśmowych LTO-9
- Efektywne wsparcie dla około jednego eksabajta pojemności archiwalnej
Z czasem system zostanie zmodernizowany i będzie obsługiwał 16 napędów LTO-10, co zwiększy gęstość pamięci masowej oraz wydłuży żywotność i skalowalność platformy. Ten plan działania umożliwi TACC stopniowy wzrost pojemności i wydajności w miarę poprawy gęstości nośników, przy jednoczesnym utrzymaniu istniejącej infrastruktury bibliotecznej.
Systemy TFinity Plus w TACC są również opakowane w specjalną grafikę przedstawiającą bydło długorogie i zainstalowane w widocznym miejscu w obiekcie. Ten wybór projektowy pozwala TACC wykorzystać wdrożenie jako pokaz edukacyjny dla odwiedzających i grup wycieczkowych, ilustrując rolę nowoczesnych taśm w środowiskach obliczeniowych na dużą skalę.
Rozwiązanie TFinity Plus charakteryzuje się dużą gęstością gniazd, elastycznym partycjonowaniem i obsługą wielu generacji taśm, co ma kluczowe znaczenie przy ocenie długoterminowego całkowitego kosztu posiadania i ryzyka technologicznego w przypadku wdrożeń klasy eksabajtów.
Versity ScoutAM i Dell Infrastructure: Przepływ danych oparty na zasadach
Po stronie oprogramowania, Versity Scale Out Archive Manager (ScoutAM) zapewnia mechanizm reguł i możliwości orkiestracji danych wymagane w środowisku wielowarstwowym i wielopetabajtowym. W TACC, Versity ScoutAM:
- Działa na 13 Serwery Dell PowerEdge R760 zapewnić skalowalną i odporną płaszczyznę sterowania
- Automatyzuje rozmieszczanie danych w:
- Pięć Dell ME5 tablice pamięci
- 16 PB Dell ECS przechowywanie obiektów
- Spectra TFinity Plus biblioteki taśm
ScoutAM umożliwia zarządzanie cyklem życia oparte na regułach, umożliwiając TACC definiowanie reguł dotyczących przenoszenia danych między warstwami o wysokiej wydajności, pojemności i archiwizacji. Jest to szczególnie ważne w przypadku obciążeń mieszanych w Horizon, gdzie wyniki symulacji, dane treningowe AI i pochodne zestawy danych mają różne wymagania dotyczące retencji, wydajności i kosztów.
Skalowalna architektura Versity ScoutAM i obsługa otwartych formatów mogą ograniczyć blokadę i uprościć integrację z istniejącymi przepływami pracy HPC, zasadami archiwizacji i ramami zgodności.
Amazon