Firma VAST Data ogłosiła wsparcie dla platformy pamięci masowej nowej generacji o nazwie Ceres. Platforma Ceres, oparta na platformie danych Universal Storage firmy VAST, została zbudowana z wykorzystaniem najnowszych technologii sprzętowych, takich jak jednostki przetwarzania danych NVIDIA BlueField DPU . Jeśli chodzi o pamięć masową, Ceres wykorzystuje zoptymalizowane pod kątem kosztów i bardzo gęste dyski flash Solidigm EI.L oraz dyski SSD klasy pamięci masowej (SCM). Połączenie tych rozwiązań sprzętowych tworzy zupełnie nowy węzeł danych VAST (DNode), który poprawia wydajność, upraszcza serwisowanie i obniża koszty centrów danych.
VAST Data Ceres 1U DNode
Według CMO i współzałożyciela Jeffa Denwortha, główną misją VAST jest uproszczenie infrastruktury, ułatwienie jej wdrażania i zarządzania, a jednocześnie zwiększenie efektywności kosztowej. VAST postawiło sobie za cel stworzenie systemu zarządzania danymi, który będzie skalowalny w prosty i ekonomiczny sposób. Kluczem było zbudowanie systemu opartego na pamięci flash, który spełniałby wymagania dotyczące wydajności, trwałości i byłby niedrogi.
Spędziliśmy kilka dni z VAST Data, aby lepiej zrozumieć, jak to wszystko działa. W końcu VAST to firma programistyczna. Kiedyś oznaczało to, że kompatybilny sprzęt był wybierany z listy kompatybilności przez klientów lub integratorów systemów. VAST działa nieco inaczej. Partner sprzętowy VAST, AVNET, składa sprzęt, ale końcowe rozwiązanie bardziej przypomina urządzenie niż tradycyjną pamięć masową zdefiniowaną programowo.
Ostatecznie, postęp w sprzęcie, na którym działa platforma Universal Storage firmy VAST, stanowi istotny czynnik różnicujący. Możliwość wykorzystania rozwijającej się technologii przesyłu danych, takiej jak NVIDIA BlueField, czyni ten sprzęt wyjątkowym. Poza garstką startupów, a może i mniejszą liczbą, od czasu wprowadzenia pamięci flash i hybrydowych macierzy pamięci masowej nie nastąpiła żadna fundamentalna zmiana w architekturze pamięci masowej. Ten niedobór innowacji najwyraźniej kończy się dzisiaj wraz z premierą VAST Ceres DNodes.
OGROMNY DASE
Nowa architektura została stworzona, aby rozwiązać problem skalowalności i wyeliminować potrzebę stosowania kontenerów bezstanowych z dostępem do dużej liczby dysków oraz konieczność koordynacji operacji wejścia/wyjścia. Dlatego VAST zaprojektował DASE ( DisAggregated Shared Everything) , strukturę danych, która mieści się w niedrogiej pamięci flash w obudowach VAST NVMe.
Systemy VAST tworzą jeden klaster i jedną pulę pamięci masowej w obudowach pamięci masowej, zawierających różną liczbę dysków SSD o różnych rozmiarach i serwerów front-end o różnej liczbie rdzeni, a nawet różnych architekturach procesorów. Pozwala to użytkownikom VAST na bezproblemowe uruchamianie klastrów z wieloma generacjami sprzętu VAST.
W architekturze DASE firmy VAST wszystkie dyski SSD są współdzielone i bezpośrednio adresowane przez wszystkie serwery protokołów front-end za pośrednictwem protokołu NVMe-oF. Metody rozmieszczania danych firmy VAST działają na poziomie urządzenia, a nie węzła/obudowy. System wybiera dyski SSD, na których ma zostać zapisany każdy pasek z kodem kasowania, na podstawie wydajności, obciążenia, pojemności i wytrzymałości wszystkich dysków SSD w systemie. To równoważy obciążenie między obudowami zawierającymi dyski SSD o różnych pojemnościach i poziomach wydajności.
System w podobny sposób równoważy obciążenie serwerów protokołu front-end o różnych poziomach wydajności, rozwiązując żądania DNS i przydzielając fragmenty zadań porządkowych systemu serwerom protokołu o najniższym wykorzystaniu procesora.
Wszystko to pozwala klastrom VAST tworzyć pojedynczą, zrównoważoną obciążeniem przestrzeń nazw obejmującą heterogeniczne serwery protokołów, obudowy i dyski SSD różnych generacji. Użytkownicy VAST po prostu dołączają nowe serwery i/lub obudowy do swoich klastrów i usuwają urządzenia po osiągnięciu końca ich żywotności.
Serwery VAST to bezstanowe kontenery, które obsługują całą logikę klastra VAST w standardowych serwerach x86. Dzięki technologii NVMe over Fabrics każdy serwer korzysta z dostępu do każdego urządzenia pamięci masowej NVMe Flash i Storage Class Memory o niskim opóźnieniu, podobnego do DAS.
Kontenery ułatwiają wdrażanie i skalowanie VAST jako mikrousługi definiowanej programowo, a także stanowią podstawę znacznie odporniejszej architektury, w której awarie kontenerów nie zakłócają działania systemu. Jest to pierwsza na świecie architektura typu „rozproszona, współdzielona całość” obejmująca całą sieć.
Obudowy VAST NVMe to wysoce dostępne, gęste struktury JBOF pamięci flash. Odpowiedzialność za przetwarzanie danych została oddzielona od obudów VAST, co pozwoliło na zdezagregowanie systemu. Ponieważ w systemie nie ma żadnej logiki, organizacje mogą dostosowywać rozmiar pojemności pamięci masowej niezależnie od mocy obliczeniowej, aby dostosować ją do swoich potrzeb. Ponieważ system jest w pełni odporny na błędy, klastry można budować już od jednej obudowy i skalować do ponad 1,000 obudów.
Kluczowe było nie tylko zaspokojenie potrzeby komunikacji między systemami, ale także zapewnienie ich liniowego skalowania. Nowy system został zaprojektowany z myślą o maksymalnym wykorzystaniu dysków flash za pomocą algorytmu zwanego kodami globalnymi. VAST wykorzystuje zapisy kształtu w trakcie ich przechodzenia przez system, wykorzystując połączenie pamięci masowej i pamięci flash, co eliminuje zużycie pamięci flash. Dzięki oprogramowaniu Universal Storage firma VAST osiągnęła dwukrotnie dłuższą żywotność pamięci flash (przekraczającą okres gwarancji producentów dysków SSD).
VAST nie koncentrował się na najwyższej wydajności, lecz na kosztach infrastruktury i korzyściach płynących z prostoty, które są efektem konsolidacji. VAST zdemokratyzował pamięć flash dla każdego centrum danych, każdej aplikacji i każdego użytkownika. Ponieważ wydajność nie była celem ostatecznym, VAST zdał sobie sprawę, że łączna wydajność pamięci flash, od petabajtów do eksabajtów, w niezawodnej i przystępnej cenowo pojemności, umożliwi realizację nowoczesnych założeń obliczeniowych. IOPS i przepustowość są teraz iloczynem pojemności pamięci flash, a wszystko staje się „wystarczające dla VAST”.
VAST rozwinął się w zaawansowanego dostawcę pamięci masowej, pozostając niezależnym od pamięci flash. Pierwotny sprzęt VAST był montowany w szafie rack 2U i mógł pomieścić 1.3 PB pamięci flash, podczas gdy najnowszy model to jednostka montowana w szafie rack 1U. I to prowadzi nas do Ceres i współpracy z firmą NVIDIA.
NVMe-oF i uniwersalna pamięć masowa
Kluczowym aspektem rozwiązania VAST jest zaawansowana inżynieria oprogramowania. Aplikacje oparte na danych, takie jak big data, uczenie maszynowe i głębokie uczenie, wymagają większej ilości danych, aby działać efektywnie. Przenoszenie danych z pamięci flash do archiwum zapobiega uczeniu się aplikacji. Chociaż dyski twarde zawsze były uważane za ekonomiczne medium do przechowywania danych, wiążą się one z kosztami. Dyski twarde działają ze stałą prędkością, nawet przy wzroście gęstości, co skutkuje spadkiem wydajności.
Pamięć masowa oparta na krzemie, znana również jako flash, została zaprojektowana w celu wyeliminowania spadku wydajności, który jest nieodłączną cechą dysków twardych. Jednak innowacje w technologii flash nie nadążały za wymaganiami przedsiębiorstw w zakresie gęstości i wydajności, zmuszając klientów do dalszych kompromisów. Tradycyjnie systemy flash dla przedsiębiorstw były znacznie droższe niż pamięci masowe oparte na dyskach twardych, dlatego pamięć flash była wykorzystywana tylko do przechowywania najcenniejszych danych.
Firma VAST postanowiła rozwiązać ten problem, demokratyzując infrastrukturę pamięci flash dla wszystkich danych, łącząc nowe algorytmy pamięci masowej z nowymi technologiami, podważając fundamentalne założenia dotyczące architektury i wdrażania pamięci masowej. Rozwiązaniem jest zapis z prędkością porównywalną z pamięcią masową, odczyt z prędkością NVMe oraz skalowanie do milionów IOPS i TB/s. Technologia NVMe-over-Fabrics (NVMe-oF) umożliwia przekształcenie standardowych sieci centrów danych w skalowalne struktury pamięci masowej, łączące wydajność NVMe DAS z efektywnością współdzielonej infrastruktury pamięci masowej.
Dyski SSD Solidigm E1.L
Aby sprostać wymaganiom w zakresie kosztów i wydajności, pamięć flash QLC umożliwiłaby realizację celów ekonomicznych koncepcji VAST, zapewniając jednocześnie wydajność pamięci flash NVMe niezbędną do obsługi najbardziej wymagających aplikacji na świecie. Dyski SSD z komórkami czteropoziomowymi (QLC) to czwarta i najnowsza generacja pamięci flash, a zatem charakteryzują się najniższymi kosztami produkcji. Dyski QLC przechowują o 33% więcej danych na tej samej przestrzeni niż dyski SSD z komórkami trzypoziomowymi (TLC).
Chociaż QLC obniża koszt na GB pamięci flash do niespotykanie niskiego poziomu, upchnięcie większej liczby bitów w każdej komórce wiąże się z kosztami. Każda kolejna generacja chipów flash obniżała koszty, mieszcząc więcej bitów w komórce, a jednocześnie charakteryzowała się mniejszą wytrzymałością, zużywając się po mniejszej liczbie cykli zapisu i kasowania. Różnice w wytrzymałości między generacjami pamięci flash są ogromne. Pamięć NAND pierwszej generacji (SLC) można było nadpisać 100 000 razy, a wytrzymałość QLC jest 100 razy niższa. To znaczący kompromis, dlatego dostawcy pamięci masowej, którzy stosują dyski SSD QLC, muszą stosować kreatywne rozwiązania.
Systemy pamięci masowej VAST Universal Storage zostały zaprojektowane z myślą o minimalizacji zużycia pamięci flash poprzez zastosowanie nowych struktur danych, zgodnych z geometrią wewnętrzną tanich dysków SSD QLC, oraz dużego bufora zapisu pamięci klasy Storage, który absorbuje zapisy, zapewniając czas i przestrzeń minimalizującą zużycie pamięci flash. To połączenie pozwala firmie VAST Data na udzielanie 10-letniej gwarancji na systemy pamięci flash QLC, co pozytywnie wpływa na ekonomikę użytkowania systemu.
Pamięć klasy pamięci
Wykorzystując nowe, nieulotne nośniki pamięci, pozycjonowane pomiędzy pamięcią flash i DRAM, pamięć klasy Storage Memory to technologia umożliwiająca wdrożenie pamięci QLC w środowiskach korporacyjnych.
Pamięć klasy pamięci masowej (SATA) to technologia pamięci trwałej, która charakteryzuje się mniejszym opóźnieniem i jest trwalsza niż pamięć flash NAND stosowana w dyskach SSD, zachowując jednocześnie zdolność pamięci flash do trwałego przechowywania danych bez zewnętrznego zasilania. Systemy pamięci masowej Universal Storage wykorzystują pamięć klasy pamięci masowej (SATA) jako wydajny bufor zapisu, co umożliwia wdrożenie niedrogiej pamięci flash QLC do przechowywania danych systemu i globalnego magazynu metadanych.
Dyski SSD KIOXIA FL6 SCM
Klaster pamięci masowej Universal Storage obejmuje dziesiątki, a nawet setki terabajtów pamięci masowej (SATA). Zalety architektury VAST DASE obejmują wyjątkowo niskie opóźnienia, 100-procentową trwałość i niski koszt w porównaniu z pamięcią DRAM. Chociaż VAST obsługuje obecnie dyski SSD SCM firm Intel i KIOXIA, platforma będzie w stanie obsługiwać inne dyski, gdy tylko pojawią się na rynku.
Uniwersalny interfejs graficzny pamięci masowej
Unikalną cechą w obszarze zarządzania pamięcią masową jest dostęp do graficznego interfejsu użytkownika (GUI) do konfiguracji, zarządzania i konserwacji nośników danych. System Universal Storage oferuje interfejs graficzny (GUI), ułatwiający pracę administratorom pamięci masowej. Systemy tego typu często działają w oparciu o interfejs wiersza poleceń (CLI), więc łatwy w obsłudze interfejs jest istotnym wyróżnikiem VAST.
Ten wyświetlacz pokazuje szacunkową pojemność użytkową każdego dysku. Lewa kolumna pozwala administratorowi wybrać dowolną z dostępnych funkcji. Każdy z „wycinków” na wykresie pokazuje wykorzystanie dysku, a szczegóły dotyczące tych wycinków znajdują się po prawej stronie. Typ wykorzystania dysku to pojemność użytkowa.
Na wyświetlaczu pulpitu wyświetlane są szczegółowe informacje dotyczące pojemności, wykorzystania fizycznego i logicznego, ogólnej wydajności, a na dole przepustowość odczytu/zapisu, liczbę operacji wejścia/wyjścia na sekundę (IOPS) i ogólne opóźnienie.
Wyświetlacz przepływu danych to niezwykle przydatne narzędzie. Pokazuje pochodzenie użytkownika, adres IP hosta, adres VIP, węzeł CN i miejsce docelowe. Zazwyczaj odbywa się to za pomocą wiersza poleceń dla każdej ścieżki na trasie, bez wyświetlania graficznego. Sam ten ekran uprościłby rozwiązywanie problemów, śledząc ścieżkę danych dla każdego użytkownika.
Interfejs graficzny umożliwia również wyświetlanie widoku sprzętu z przodu i z tyłu. Wybrany dysk jest prezentowany na ekranie w widoku z przodu Ceres. Intuicyjne wskaźniki wizualne ułatwiają również serwisowanie dysku SSD w przypadku konieczności wymiany.
Na tym samym ekranie można wybrać jeden z dysków SSD znajdujących się z tyłu serwera.
Jednostki DPU VAST Data Ceres
Nowa koncepcja platformy pamięci masowej Ceres wykorzystuje procesory DPU NVIDIA BlueField oraz dyski flash hyperscale oparte na linijkach, które służą jako oddzielne elementy konstrukcyjne skalowalnych klastrów danych. Platforma pamięci masowej Universal Storage firmy VAST obsługuje platformę Ceres w obudowie NVMe nowej generacji o wysokiej wydajności.
Procesor NVIDIA®
Jeff Denworth, dyrektor marketingu VAST Data, wyjaśnił:
Rok temu przedstawiliśmy branży naszą wizję infrastruktury danych o dużej skali i jesteśmy pod wrażeniem współpracy i wsparcia, jakie otrzymaliśmy od partnerów branżowych. Podczas gdy gwałtowny wzrost danych nadal przytłacza organizacje, które coraz trudniej znaleźć wartość w ogromnych zasobach danych, Ceres umożliwia klientom realizację przyszłości opartej na skalowalnej sztucznej inteligencji i analityce dla wszystkich danych, w miarę jak budują je do skali SuperPOD i dalej.
VAST i partnerzy branżowi zaprojektowali Ceres, aby wprowadzić pamięć masową w erę nowoczesnej sztucznej inteligencji, zapewniając nową prędkość, odporność, modułowość i wydajność centrów danych. Misja VAST, polegająca na wyposażeniu przedsiębiorstw i dostawców usług w nowe możliwości, które dotychczas były domeną największych na świecie dostawców chmury hiperskalowalnej, została dodatkowo wzmocniona dzięki Ceres. Oprogramowanie VAST Universal Storage stanowiło podstawę nowej platformy sprzętowej, która umożliwia klientom wdrażanie najnowocześniejszych technologii.
Ta nowa platforma oferuje zwiększoną wydajność, niższe zużycie energii i oszczędność miejsca. Wykorzystanie technologii NVIDIA BlueField DPU umożliwia budowę obudów NVMe bez konieczności stosowania dużych i energochłonnych procesorów x86. Dzięki przeniesieniu usług NVMe-oF z serwerów x86 na jednostki DPU BlueField, technologia NVIDIA umożliwia opracowanie obudowy o formacie 1U, która może zapewnić wydajność ponad 60 GB/s na obudowę. Architektura DASE firmy VAST została zaprojektowana z myślą o wykorzystaniu systemów opartych na DPU poprzez oddzielenie przetwarzania pamięci masowej od warstwy flash.
Układ sprzętowy VAST Data Ceres
Na pierwszy rzut oka VAST Ceres wygląda jak typowy serwer 1U z dość elegancką ramką. Stylowy panel przedni został zaprojektowany z myślą o przepływie powietrza, ale po włączeniu zasilania podświetla nawet przednie dyski SSD ciekawym podświetleniem. Logo VAST również świeci swoją kolorystyką, co dodaje mu estetyki. Dbałość o szczegóły na zewnątrz przekłada się na wnętrze, ujawniając serwer pamięci masowej, który jest daleki od typowości.
Po zdjęciu ramki w końcu zaczynasz dostrzegać, jak wyjątkowy i gęsty jest ten serwer. Na froncie znajdują się 22 dyski SSD E1.L, a w tym przypadku 22 dyski SSD Solidigm P5316 o pojemności 15.36 TB lub 36.72 TB. Dyski te są również dostępne w większym formacie 2.5″ U.2, ale gęstość na jednostkę rack jest znacznie zmniejszona. Dyski SSD E1.L mają również wyraźne zalety w zakresie chłodzenia, a bardzo długa obudowa zapewnia znaczną powierzchnię odprowadzania ciepła.
Format E1.L jest bardzo długi, stąd określenie „linijka”. Mierzą one nieco ponad 12.5 cala długości, co daje wyobrażenie o tym, ile miejsca zajmują w samym tylko pierwszym metrze serwera. Chociaż prawie 340 TB lub 675 TB pamięci flash QLC (w zależności od wybranych dysków) to nic nadzwyczajnego, to za środkowym elementem serwera znajduje się jeszcze więcej pamięci flash. Warto zauważyć, że to tylko rozmiar samej pamięci masowej dysków QLC; VAST oferuje redukcję danych, co przekłada się na jeszcze lepszą gęstość.
Przedni blok z logo skrywa cztery dodatkowe tacki na dyski SSD i pełni funkcję integralnego elementu chłodzącego z przodu obudowy. Blok ten wyposażony jest w trzy wentylatory, które zapewniają dodatkowe chłodzenie w środkowej części obudowy, wzdłuż pamięci flash KIOXIA SCM, znajdującej się w centrum tego konkretnego węzła D.
Każda z czterech tac mieści dwa 2.5-calowe dyski SSD U.2, które w tym systemie są dyskami SSD KIOXIA FL6 o pojemności 800 GB. VAST wykorzystuje je jako bufor zapisu do absorbowania danych przychodzących przed ich filtrowaniem do otaczającej je pamięci flash QLC o wyższej gęstości. Na tym serwerze 1U praktycznie nie ma niewykorzystanej przestrzeni, która nie byłaby w ten czy inny sposób wykorzystywana do zwiększenia pojemności pamięci masowej.
Widok z tyłu obudowy VAST Ceres pokazuje, że została ona zaprojektowana z myślą o pełnej redundancji, z dwoma zasilaczami i dwoma kontrolerami. Każdy kontroler zawiera dwa układy DPU NVIDIA BlueField BF1600, oferujące po dwa porty 100 GbE każdy. Łącznie oba kontrolery zapewniają użytkownikom łączność o przepustowości 800 Gb/s. Każdy kontroler ma dwa porty 1 GbE do zarządzania oraz port micro USB do bezpośredniego dostępu do kontrolera BMC.
Wewnętrzna konstrukcja każdego z kontrolerów również nie pozostawia żadnej niewykorzystanej przestrzeni. Każdy układ DPU NVIDIA BF1600 jest podłączony przez gniazdo x16 PCIe Gen4, a dodatkowe zasilanie jest doprowadzane przez małą klatkę tuż poza kartami, na zewnątrz obudowy.
Chociaż wewnętrzna konstrukcja VAST Ceres przypomina nieco tradycyjne serwery SLEED, nie posiada ona podstawowej architektury x86 ani podobnej. Każdy kontroler to w zasadzie jeden duży przełącznik PCIe, łączący jednostki DPU z wewnętrzną pamięcią masową, do której dostęp jest od przodu. Chociaż jednostki DPU NVIDIA BF1600 oferują 16 GB pamięci eMMC na BIOS i system operacyjny, VAST zaprojektował dodatkową wewnętrzną pamięć DPU w postaci dwóch dysków SSD M.2 na każdą saneczkę.
Schemat blokowy VAST Ceres naprawdę pomaga w uzyskaniu pełnego obrazu konstrukcji tego systemu. Z przodu znajdują się dwa zestawy dysków SSD i dysków NVRAM/SCM, które są następnie rozdzielane między dwie jednostki DPU wewnątrz każdej sanki kontrolera. Każda sanka to duży przełącznik PCIe, który kieruje pamięć masową NVMe PCIe bezpośrednio do dwóch jednostek DPU NVIDIA zainstalowanych w jej wnętrzu. Z tą strukturą styka się również kilka dodatkowych komponentów, takich jak kontroler BMC, karty sieciowe do zarządzania i dyski SSD M.2.
To są algorytmy
Jak opisano powyżej, Ceres oferuje nowe, oparte na linijkach dyski SSD o wysokiej gęstości, które zapewniają konfiguracje o ultragęstej pojemności pamięci flash. Z czasem dyski flash oparte na linijkach, o większej powierzchni, będą miały większą pojemność niż tradycyjne dyski NVMe. VAST nawiązał współpracę z Solidigm , aby certyfikować swoje linijki o pojemności 15 TB i 30 TB, zapewniając do 675 TB surowej pamięci flash w obudowie 1U.
Firma Solidigm rozpoczęła działalność w styczniu po przejęciu technologii Intel NAND i SSD przez SK Hynix. Solidigm działa jako samodzielna amerykańska spółka zależna SK Hynix Inc. Z siedzibą w San Jose, nowa spółka zależna zarządza rozwojem produktów, produkcją i sprzedażą przejętych aktywów Intela. Format „linijki” Intel/Solidigm został wprowadzony w 2017 roku i formalnie znany jest jako E1.L i E1.S. Solidigm oferuje szerokie portfolio produktów o tym formacie, oferując opcje obejmujące elastyczne optymalizacje dla pamięci masowej o wysokiej gęstości (E1.L), skalowalną wydajność (E1.S) oraz popularne serwery 2U (E3).
Dzięki algorytmom redukcji danych opartym na podobieństwie firmy VAST Data, Ceres może zarządzać niemal 2 PB efektywnej pojemności na obudowę przy średnim współczynniku redukcji danych 3:1. Dodatkowo, techniki kształtowania zapisu firmy VAST wydłużają żywotność pamięci flash QLC. Jednocześnie zaawansowane kodowanie kasujące znacząco przyspiesza odbudowę urządzeń pamięci masowej o bardzo dużej pojemności.
System Ceres został zaprojektowany, aby rozwiązać szereg problemów, z którymi borykają się klienci korzystający z systemów pamięci masowej o wysokiej gęstości. System został zaprojektowany z myślą o pełnej obsłudze z przodu i z tyłu, co eliminuje potrzebę organizacji okablowania i konieczność wsuwania i wysuwania systemów z szaf.
Platforma Ceres redukuje początkowe koszty sprzętu dzięki minimalnej pojemności wejściowej 338 TB, a jednocześnie umożliwia płynne skalowanie klastra do setek petabajtów. Zwiększona odporność na awarie w szafie rack dzięki mniejszej liczbie podzespołów umożliwia pełne przełączanie awaryjne w klastrach Universal Storage. Klienci mają możliwość elastycznego łączenia i dopasowywania Ceres ze sprzętem poprzedniej generacji obsługiwanym przez VAST, co zapewnia nieskończony cykl życia klastra.
Charlie Boyle, wiceprezes i dyrektor generalny działu systemów DGX w firmie NVIDIA, mówiąc o korzyściach dla klientów firmy NVIDIA, powiedział:
„Korporacyjny poziom prostoty i odporności to kluczowe czynniki sukcesu firmy NVIDIA, ponieważ infrastruktura AI jest szeroko wdrażana na całym świecie. Nawiązaliśmy współpracę z firmą VAST, ponieważ wydajność, opłacalność i prostota ich architektury spełniają wymagania rozwiązań DGX SuperPOD i naszych klientów, którzy na nich polegają. VAST Universal Storage i platforma Ceres dodatkowo umożliwiają klientom firmy NVIDIA korzystanie z zalet jednostki DPU NVIDIA w całym centrum danych AI, zapewniając doskonałą wydajność, bezpieczeństwo i efektywność dzięki innowacjom BlueField”.
VAST i NVIDIA SuperPod i więcej
VAST i NVIDIA współpracują również nad nowymi usługami pamięci masowej, aby zapewnić bezpieczeństwo typu „zero trust” i funkcjonalność odciążania (offload) w jednostkach przetwarzania danych (DPU) po stronie klienta, takimi jak te wprowadzone w niedawno ogłoszonych konfiguracjach NVIDIA DGX SuperPOD. W ramach współpracy z NVIDIA, VAST certyfikuje platformę Ceres dla NVIDIA DGX SuperPOD. Produkt SuperPOD został zaprojektowany z myślą o obciążeniach AI na dużą skalę, łącząc w sobie wysokowydajną pamięć masową i funkcje sieciowe, zapewniając klientom korporacyjnym gotowe rozwiązanie dla centrów danych AI.
Zaprojektowana z myślą o transformacji branży w kierunku sztucznej inteligencji (AI), infrastruktura superkomputerowa SuperPod jest wdrażana jako w pełni zintegrowany system. Dzięki technologii DASE firmy VAST, Ceres stanowi fundament platformy danych dla SuperPod. Platforma Ceres będzie początkowo produkowana przez partnerów projektowych VAST, takich jak AIC i Mercury Computer. Będzie ona stanowić elementy składowe pojemności danych w klastrach Universal Storage firmy VAST.
Dzięki Ceres klienci NVIDIA mogą teraz cieszyć się prostotą rozwiązania NAS z nieograniczonymi poziomami skalowalności i wydajności dzięki architekturze systemu, która radykalnie zwiększa odporność pamięci masowej, co potwierdza 99.9999% dostępność VAST dla eksabajtów danych produkcyjnych. Dzięki wydajności all-flash i ekonomicznej pamięci archiwalnej, VAST ułatwi klientom NVIDIA DGX SuperPOD skalowanie infrastruktury szkoleniowej AI w celu obsługi eksabajtów danych, bez uciążliwych kompromisów w zakresie wydajności i pojemności, narzucanych przez starsze, wielowarstwowe architektury pamięci masowej. Przeczytaj tutaj, aby dowiedzieć się więcej o tym, jak VAST uprości skalowanie rozwoju AI w DGX SuperPOD.
Certyfikat VAST Data Universal Storage dla NVIDIA DGX SuperPOD ma być dostępny w połowie 2022 roku.
Wniosek
Organizacje posiadające jedne z największych środowisk obliczeniowych na świecie wybrały już platformę Ceres. VAST otrzymał zamówienia na oprogramowanie obsługujące ponad 170 PB danych, które ma zostać wdrożone na platformach Ceres.
Chociaż VAST jest przede wszystkim firmą programistyczną, to sprzęt oferuje interesujący wgląd w przyszłość rynku pamięci masowej dla przedsiębiorstw. Podczas gdy niektórzy dostawcy wciąż podążają ścieżką platform budowanych wokół sprzętu x86 z tradycyjnym podejściem serwerowym, VAST obiera inną drogę. Tradycyjny model serwera sprawdził się przez lata, chociaż wraz z ewolucją komponentów pamięci masowej i sieciowych, muszą ewoluować również projekty serwerów pamięci masowej.
Węzły DNode VAST Data Ceres łączą do 675 TB pamięci flash QLC (przed kompresją danych) i 6.4 TB pamięci SCM z czterema jednostkami DPU NVIDIA BlueField, zapewniając łączność o przepustowości ponad 800 Gb/s w obudowie 1U. Jest to możliwe dzięki wyeliminowaniu pośrednika, którym w tym przypadku jest serwer x86, i zastąpieniu go przełączającą strukturą PCIe, aby bezpośrednio połączyć 22 dyski SSD E1.L i 8 dysków SSD U.2 z czterema jednostkami DPU. Dzięki temu, że jednostki DPU wykonują większość zadań, a oprogramowanie VAST jest na wierzchu, wymagane są bardzo niewielkie dodatkowe zasoby.
Choć absolutnie uwielbiamy innowacje sprzętowe VAST Data Ceres, to oprogramowanie robi ogromną różnicę. Kształtowanie zapisu w celu ochrony wytrzymałości dysku SSD, redukcja danych w celu wielokrotnej rozbudowy pojemności oraz graficzny interfejs użytkownika, który upraszcza standardowe funkcje, to tylko niektóre z głównych atutów. Dzięki VAST, końcowym rezultatem jest niezwykle wydajny klaster, który zapewnia korzystną ekonomikę dzięki wszystkim innowacjom na platformie węzłów danych. Każda organizacja, która chce nie tylko zarządzać rozległymi danymi, ale także podejmować decyzje biznesowe w oparciu o wnioski płynące z analiz, powinna jak najszybciej umówić się na prezentację VAST Data .
Niniejszy raport jest sponsorowany przez VAST Data. Wszystkie poglądy i opinie wyrażone w niniejszym raporcie opierają się na naszej obiektywnej opinii na temat rozpatrywanego produktu/produktów.
Amazon