Apollo firmy Hewlett Packard Enterprise (HPE) to rodzina rozwiązań obliczeniowych i pamięci masowej opartych na infrastrukturze konwergentnej, opartych na rolach i zapewniających wysoką wydajność i gęstość w segmencie korporacyjnym. Serwery Apollo 4530 wykorzystują obudowę 4U obsługującą do 68 dysków twardych 3.5″, trzy wewnętrzne serwery ProLiant Gen9 z procesorami Xeon E5-2600v3 lub v4, do 1,024 GB pamięci DDR4 oraz 4 gniazda PCIe i technologię FlexibleLOM. Z punktu widzenia pamięci masowej oznacza to, że każda obudowa Apollo 4530 może zarządzać ponad 500 TB pamięci masowej w przypadku dysków 8 TB lub nieco poniżej 700 TB w przypadku modeli 10 TB. Systemy te zostały zaprojektowane specjalnie z myślą o szybko rozwijających się systemach pamięci masowej dla dużych zbiorów danych, analiz i systemów HPC.
Apollo 4500 jest następcą modelu HPE SL4540 i jest zorientowany na obiektową pamięć masową oraz analitykę korporacyjną. Rodzina Apollo oferuje stosunkowo dużą liczbę konfiguracji, a serwery Apollo 4530, takie jak te w naszym laboratorium, przeznaczają więcej miejsca w obudowie na zasoby obliczeniowe. Gęstość obliczeniowa serwera Apollo 4530 oznacza, że pełna szafa rack 42U pomieściłaby 30 serwerów, a model 4530 jest dostępny z maksymalnie 2 procesorami Intel Xeon E5-2600v4 na serwer. Dostępne są procesory o liczbie rdzeni od 6 do 22 i mocy do 145 W.
Oczywiście HPE oferuje szeroką gamę rozwiązań SDS, z którymi przedsiębiorstwa są w dużej mierze zaznajomione. Podejście Apollo różni się jednak zasadniczo od sposobu, w jaki większość przedsiębiorstw postrzega wdrożenia SDS, które często postrzegane są jako domena podstawowej pamięci masowej. Platforma Apollo wykorzystuje podejście skoncentrowane na pojemności do SDS, nawet w przypadku obudowy 4530 o dużej gęstości serwerów. Daje to partnerom oprogramowania wzmocnioną, a jednocześnie wyjątkową platformę do działania, stworzoną specjalnie do zadań Apollo 4530 w dużej skali pojemności. Z kolei Apollo 4530 został zaprojektowany tak, aby wypełnić niszę obliczeniową dla analityki w rodzinie Apollo, a jego obudowa trzyserwerowa stwarza możliwości skalowalności i paralelizmu przy stosunkowo niewielkiej przestrzeni w szafie. Na przykład wdrożenia Hadoop korzystają z możliwości jednoczesnego przetwarzania trzech kopii zestawu danych. Analityka oparta na NoSQL to kolejny cel dla tej konfiguracji architektury.
Aby zobrazować fizyczne różnice między modelami z linii Apollo, model 4510 ma jeden węzeł, 4520 ma dwa węzły, a 4530 ma trzy węzły. Poza oczywistą liczbą węzłów na zewnątrz, układ wewnętrzny każdej jednostki Apollo różni się, aby dostosować się do liczby węzłów obsługiwanych przez obudowę. Model 4510 oferuje 60 wewnętrznych kieszeni na dyski podłączonych do jednego węzła, model 4520 ma 46 kieszeni na dyski (23 równo podzielone na węzeł), natomiast model 4530 ma 45 kieszeni na dyski (po 15 na węzeł). Zatem przy maksymalnej pojemności pamięci masowej model 4510 może pomieścić najwięcej dysków. Jednak w celu zapewnienia najwyższej odporności na awarie, model 4530 z trzema węzłami oferuje najwyższą ochronę i jednoczesny dostęp. Wszystkie dyski twarde są montowane od góry. Model 4520 posiada moduły rozszerzeń do współdzielenia pamięci masowej między węzłami, a model 4530 ma trzy niezależne, niewspółdzielone serwery, każdy z 15 dyskami. Model 4510 obsługuje więcej opcji kontrolerów i dysków niż modele 4520 i 4530, co zapewnia maksymalną gęstość dysków, co czyni go najlepszym rozwiązaniem obniżającym koszty wdrożeń skalowalnej pamięci masowej. Model 4510 można również skonfigurować z 8 dodatkowymi kieszeniami na dyski (poza 60 wewnętrznymi), za pomocą dodatkowej wnęki.
Wszystkie systemy Apollo 4000 zawierają kartę HPE Smart Array ze zintegrowaną funkcją bezpiecznego szyfrowania FIPS 140-2, transparentną dla systemu operacyjnego. Dane na dowolnym dysku mogą być szyfrowane, a kluczami można zarządzać lokalnie lub za pośrednictwem systemu zarządzania kluczami w środowiskach i aplikacjach, które tego wymagają. Apollo obsługuje również szeroką gamę narzędzi do zarządzania, takich jak iLO dla zintegrowanych serwerów ProLiant oraz Cluster Management Utility (CMU) do provisionowania, zarządzania i monitorowania klastra.
Specyfikacje HPE Apollo 4530
- Współczynnik kształtu: obudowa infrastruktury współdzielonej 4U
- Serwer: Do 3 serwerów na obudowę
- Typ pamięci masowej: Do 15 dysków LFF typu hot-plug SAS/SATA/SSD na serwer; Do 45 dysków na obudowę
- Pojemność pamięci masowej: do 150 TB na serwer (15 dysków twardych LFF 10 TB); do 4.5 PB na szafę 42U (30 serwerów z dyskami twardymi 10 TB)
- Kontroler pamięci masowej: HPE Dynamic Smart Array b140i; zintegrowane kontrolery HPE Smart Array P244br/HPE H244br; plus dodatkowe opcje kontrolerów Smart Array lub Smart HBA
- Rodzina procesorów: Intel Xeon E5-2600 v3 lub v4 Series
- Liczba procesorów: Jeden lub dwa na serwer
- Processor cores available: 6/8/10/12/14/16/18/20/22
- Częstotliwość procesora: od 1.6 GHz do 2.6 GHz
- Pamięć: HPE SmartMemory; 16 gniazd DIMM; do 1,024 GB pamięci DDR4 o częstotliwości do 2,400 MHz
- Sieć: 2 x 1 Gb Ethernet oraz opcje FlexibleLOM i PCIe
- Gniazda rozszerzeń: do czterech gniazd PCIe + obsługa FlexibleLOM
- Zarządzanie: HPE iLO 4
- Zalecane do zarządzania na dużą skalę: HPE Apollo Platform Manager; HPE Insight Cluster Management Utility
- Cechy wentylatorów systemowych: Pięć modułów wentylatorów z możliwością wymiany na gorąco (zapewniających redundancję)
Budowa i projektowanie
System Apollo 4530 posiada obudowę 4U zaprojektowaną z myślą o maksymalnej gęstości. Apollo 4530 mieści w sobie trzy serwery ProLiant Gen9, a każdy serwer można wyposażyć w maksymalnie 15 dysków SAS lub SATA z możliwością podłączania podczas pracy. Najgęstsza dostępna konfiguracja pamięci masowej Apollo 4530 wykorzystuje dyski LFF o pojemności 10 TB, co pozwala na osiągnięcie łącznej pojemności 4.5 PB w szafie 42U wypełnionej systemami 4530.
Przód systemu zapewnia dostęp do trzech wewnętrznych węzłów serwerowych. Dostęp do maksymalnie dwóch dysków SFF na węzeł serwerowy jest możliwy od przodu, a każdy serwer jest wyposażony w oczekiwany zakres wskaźników LED. Wszystkie główne komponenty systemu Apollo 4530 obsługują konserwację typu hot-plug, w tym węzły serwerowe, a także ich napędy i zasilacze.
Tylna część obudowy Apollo 4530 zapewnia dostęp do modułów wejścia/wyjścia każdego węzła serwera oraz gniazd PCIe u góry. W lewym dolnym rogu obudowy znajduje się port zarządzania HPE-APM, port iLO4 oraz port serwisowy HPE Tools. Wnęki na maksymalnie cztery zasilacze uzupełniają pozostałą przestrzeń z tyłu obudowy.
Zarząd
Systemy Apollo 4500 wykorzystują technologię HPE Integrated Lights Out 4 (iLO4) do bezagentowego monitorowania, zarządzania i rozwiązywania błędów. iLO4 obejmuje zdalną konsolę, kontrolę zasilania, zarządzanie nośnikami wirtualnymi, wyszukiwanie i monitorowanie stanu federacji oraz interfejs API RESTful. Bardziej szczegółową recenzję iLO4 i zarządzania serwerem ProLiant Gen9 można znaleźć w naszych recenzjach HPE iLO4 oraz HPE ProLiant DL360 Gen9.
iLO4 oferuje trzy opcje zdalnej konsoli: interfejs .Net, interfejs Java lub aplikację mobilną. Główny interfejs iLO4 wykorzystuje drzewo nawigacyjne po lewej stronie.
Grupy federacyjne iLO ułatwiają monitorowanie i zarządzanie grupami serwerów, w tym aktualizacje oprogramowania sprzętowego i instalację kluczy licencyjnych. iLO jest oferowane z trzema schematami licencjonowania dla serwerów Gen9, takich jak te używane w Apollo 4530. Licencja „iLO Standard” umożliwia zdalne zarządzanie za pośrednictwem zintegrowanej konsoli zdalnej (IRC), a także nośników wirtualnych i zapewnia podstawową funkcjonalność federacji iLO. Licencja „iLO Advanced” obejmuje pełną funkcjonalność zdalną i wszystkie funkcje federacji iLO, takie jak grupowe aktualizacje oprogramowania sprzętowego, nośniki wirtualne grup, grupowa kontrola zasilania, ograniczanie zużycia energii i aktywacja licencji grupowej. Dostępna jest również licencja „iLO Scale-Out”, zorientowana na te zastosowania.
Jako platforma Gen9, systemy Apollo 4500 mogą korzystać z oprogramowania zarządzającego HPE Insight Control. HPE Insight Control automatyzuje wdrażanie i migrację, a także zapewnia narzędzia integracyjne dla rozwiązań do zarządzania maszynami wirtualnymi firm VMware, Microsoft, Citrix i Xen.
System HPE Active Health System (AHS) rejestruje dane dotyczące stanu zdrowia, konfiguracji i inne dane telemetryczne z iLO4, pamięci ROM systemu, usługi Agentless Management Service, kart sieciowych i innych komponentów. Można go używać do automatycznego wysyłania danych telemetrycznych do programów HPE Insight Online Direct Connect lub Insight Remote Support 7.x.
Aplikacja mobilna iLO na systemy iOS i Android może współpracować z procesorem iLO, zapewniając dostęp do stanu systemu, logów, skryptów i nośników wirtualnych. Narzędzie interfejsu RESTful umożliwia konfigurację skryptową w celu szybkiego wdrażania serwerów ProLiant z heterogenicznymi systemami operacyjnymi, a serwery Gen9, takie jak Apollo 4500, obsługują zarządzanie za pośrednictwem oprogramowania HPE Virtual Connect Enterprise Manager 7.4.
HPE OneView
Inną opcją zarządzania, którą można wykorzystać z platformą Apollo, jest HPE OneView. OneView to silnik automatyzacji infrastruktury HPE z wbudowaną inteligencją oprogramowania. Ideą OneView jest uproszczenie alokacji i zarządzania cyklem życia zasobów obliczeniowych, pamięci masowej i infrastruktury sieciowej poprzez automatyzację. Infrastrukturę można konfigurować, monitorować, aktualizować i dostosowywać do nowych potrzeb za pomocą jednej linijki kodu, odciążając dział IT i pozwalając mu na zarządzanie innymi, zmieniającymi się potrzebami. OneView jest skierowany przede wszystkim do przedsiębiorstw i umożliwia skalowanie do 640 serwerów.
Dział IT może szybciej wdrażać infrastrukturę dzięki szablonom HPE zawartym w OneView. Szablony te umożliwiają użytkownikom modelowanie ustawień w oprogramowaniu, takich jak konfiguracja RAID, ustawienia BIOS-u, linia bazowa oprogramowania sprzętowego, łącza sieciowe uplink i downlink oraz woluminy pamięci masowej SAN i podział na strefy. Innym sposobem, w jaki OneView wspomaga wdrażanie, jest automatyzacja aktualizacji sterowników urządzeń i oprogramowania sprzętowego na dużą skalę. Administratorzy mogą konfigurować drobne aktualizacje bez przestojów, a duże aktualizacje z krótszym czasem przestoju. OneView może również pobierać zgłoszenia awarii sprzętu z iLO i rejestrować je w dziale wsparcia HPE, co z kolei przyspiesza rozwiązywanie problemu.
Narzędzie do zarządzania klastrem HPE Insight
Inną opcją zarządzania, w zależności od potrzeb użytkowników, jest narzędzie HPE Insight Cluster Management Utility (CMU). CMU jest przeznaczone dla środowisk klastrowych i zapewnia użytkownikom monitorowanie, metryki węzłów oraz zdalne zarządzanie. CMU idealnie sprawdza się w organizacjach obsługujących setki, a nawet tysiące węzłów. CMU obsługuje systemy Red Hat Linux, SUSE Linux Enterprise Server (SLES) oraz wiele społecznościowych dystrybucji Linuksa. CMU oferuje zarówno interfejs wiersza poleceń (CLI), jak i graficzny interfejs użytkownika (GUI) do monitorowania i zarządzania. CMU został zaprojektowany z myślą o pracy z rozwiązaniami HPC i Big Data i może obsługiwać do 10 000 serwerów w konfiguracji klastra.
Dzięki interfejsowi graficznemu możemy przejść do sekcji monitorowania w sekcji szczegółów i kliknąć jeden z Apollosów w naszym klastrze. Tutaj możemy zobaczyć wiele funkcji, w tym funkcje zasobów, funkcje niestandardowe i funkcje wewnętrzne.
Kliknij prawym przyciskiem myszy i otwórz w nowej karcie, aby uzyskać większy obraz
Możemy również przyjrzeć się poszczególnym węzłom, aby uzyskać głębszy wgląd w cechy każdego węzła.
Kliknij prawym przyciskiem myszy i otwórz w nowej karcie, aby uzyskać większy obraz
Mieliśmy możliwość przyjrzenia się konkretnej grupie obrazów i sprawdzenia, które węzły należą do tej grupy i z których urządzeń pochodzą.
Kliknij prawym przyciskiem myszy i otwórz w nowej karcie, aby uzyskać większy obraz
Dzięki funkcji Instant View możemy w każdej chwili sprawdzić konkretne dane klastra, takie jak procentowe obciążenie procesora, prędkość odczytu z dysku, temperaturę i zużycie energii. W momencie robienia zrzutu ekranu klaster był wyłączony.
Kliknij prawym przyciskiem myszy i otwórz w nowej karcie, aby uzyskać większy obraz
Przykłady zastosowań HPE Apollo
Biorąc pod uwagę unikatowy format sprzętu, HPE dobrze zrobiło, współpracując z kilkoma firmami programistycznymi w celu opracowania najlepszych praktyk i przewodników wdrożeniowych dla różnych zastosowań. Poniżej wyróżniliśmy kilka z nich, aby dać lepszy obraz możliwości wykorzystania platformy Apollo.
Scality RING i Apollo 4530
Firma HPE opisuje serię Apollo 4500 jako fundamenty obiektowej pamięci masowej na skalę korporacyjną. Biorąc pod uwagę tę filozofię, jesteśmy szczególnie zainteresowani analizą Apollo 4530 w kontekście skalowalnej pamięci masowej HPE z technologią Scality RING . Technologia Scality RING może zostać wdrożona przy minimalnym rozmiarze jednego klastra z sześcioma węzłami serwerowymi i może skalować się do tysięcy węzłów serwerowych w skali petabajtów.
W warstwie pamięci masowej RING zapewnia abstrakcję dla bazowego sprzętu, a także usługi dostępu do danych, ich ochrony i zarządzania nimi. Środkową warstwę architektury RING stanowi rozproszony wirtualny system plików z mechanizmami ochrony danych i usługami zarządzania, które obsługują rozproszony magazyn obiektów klucz-wartość RING. W warstwie najwyższej usługi danych aplikacji RING są realizowane za pośrednictwem warstwy „serwerów łącznikowych”. Mogą to być bramy fizyczne lub maszyny wirtualne działające bezpośrednio na węzłach pamięci masowej.
W terminologii Scality, interfejs graficzny RING (web GUI) jest nazywany „nadzorcą”, który udostępnia pulpit nawigacyjny oraz podmenu do zarządzania różnymi warstwami architektury RING. Nadzorca komunikuje się z agentem zarządzającym „sagentd” zainstalowanym na każdym serwerze. Dostępny jest również skryptowalny interfejs konsoli o nazwie RingSH do zarządzania i monitorowania. RING udostępnia zgodną z protokołem SNMP bazę MIB, która umożliwia integrację z narzędziami do zarządzania innych firm i zarządzanie alertami.
Ponieważ RING nie wymaga niestandardowego jądra Linux, możliwości skalowania i aktualizacji systemu są niezależne od sprzętu i ograniczone jedynie przez samą dystrybucję Linuxa. Innym powodem, dla którego RING zyskuje popularność u takich firm jak HPE i Dell, jest to, że RING oferuje narzędzia do świadczenia usług pamięci masowej dla starszych systemów i protokołów, umożliwiając konsolidację danych ze starszych aplikacji w nowej infrastrukturze pamięci masowej.
Architektury referencyjne pamięci masowej bloków: Ceph
HPE oferuje również architektury referencyjne dla rozwiązań pamięci masowej obiektowej opartych na technologii Ceph. Zastosowanie Ceph przez HPE polega na odciążaniu istniejącej infrastruktury pamięci masowej z zimnych danych. Ceph można skalować do skali stu petabajtów i skonfigurować tak, aby zapewniał zarówno pamięć blokową o niskiej wydajności, jak i pamięć obiektową. HPE zaleca węzły Apollo 4530 dla hostów pamięci masowej o niskiej wydajności lub efemerycznej pamięci blokowej, a Apollo 4510 jest zalecany dla hostów pamięci masowej obiektowej. Ceph można wykorzystać na wiele sposobów, a niedawno recenzowaliśmy SUSE Enterprise Storage , również działający na serwerach Apollo.
Architektury referencyjne Hadoop: Cloudera i Hortonworks
HPE dostarcza architektury referencyjne dla dwóch rozwiązań Hadoop: Cloudera i Hortonworks. Obie architektury referencyjne zostały zweryfikowane pod kątem gęstych wdrożeń w jednej szafie, jak również dla większych wdrożeń.
HPE zweryfikowało tę konfigurację z Cloudera 5.3 i Cloudera Manager 5, ale HPE i Cloudera obsługują również inne wersje CDH 5.x ze sprzętem Apollo 4000. Klienci korzystający z Cloudera na dużą skalę mogą również skorzystać z Cloudera Enterprise, oferty opartej na subskrypcji, umożliwiającej provisionowanie i zarządzanie klastrami, w tym w środowiskach wymagających mierzalnych umów SLA lub rozliczeń zwrotnych. Architektura referencyjna Apollo 4000 dla Hortonworks jest oparta na Hortonworks Data Platform 2.2 i jest również aktualna dla wersji HDP 2.x.
HPE wprowadza również własne oprogramowanie dla tych referencyjnych architektur Hadoop. HPE Vertica zapewnia przetwarzanie analityczne ustrukturyzowanych danych, takich jak rejestry połączeń, strumienie danych finansowych i przeanalizowane dane z blogów. Vertica może być używana w razie potrzeby z tymi dwiema dystrybucjami Hadoop do obsługi szybkich obciążeń i zapytań ad-hoc dotyczących danych relacyjnych.
IDOL for Hadoop wykorzystuje platformę analityczną HPE IDOL 10, aby zapewnić funkcjonalność niestrukturalnego przechowywania danych w ramach Hadoop. Na przykład IDOL KeyView wyodrębnia tekst, metadane i informacje o zabezpieczeniach z danych w celu identyfikacji poufnych pól, takich jak numer ubezpieczenia społecznego i numer karty kredytowej, zapobiegając w ten sposób przypadkowemu przechowywaniu poufnych informacji w Hadoop.
Wniosek
Seria HPE Apollo 4500 to niezwykła platforma dostosowana specjalnie do popularnych projektów rozwoju oprogramowania na dużą skalę, takich jak Cloudera, Scality i Ceph. W swojej istocie Apollo 4500 łączy zalety pamięci masowej JBOD z lokalnymi zasobami obliczeniowymi. To, co wyróżnia serię 4500, to fakt, że podczas gdy inni dostawcy mogą pozycjonować pojedynczy serwer z ogromnymi zasobami pamięci masowej lub HA JBOD z dwoma serwerami, HPE pokrywa ten obszar i idzie o krok dalej z modelami 4510 (jeden węzeł), 4520 (dwa węzły) i 4530 (trzy węzły). Oferuje to dokładnie to, czego potrzebują specjaliści od pamięci obiektowej, w zależności od tego, jak skonfigurują swoje platformy. Ta unikalna konstrukcja wynika z zapotrzebowania na repliki pamięci masowej, gdzie użytkownicy budują wokół potrzeby jednej, dwóch lub trzech replik, wybierając poziom odporności pamięci masowej.
Testowany przez nas serwer Apollo 4530 łączy trzy serwery ProLiant Gen9 w jednej obudowie, w której do każdego węzła przydzielono 15 dysków twardych 3.5″. To wygodna i wiodąca w branży konfiguracja pod względem paralelizmu oraz imponujący postęp w zakresie gęstości obliczeniowej w ofercie HPE dla przedsiębiorstw. Wykorzystanie trzech węzłów o pojemności do 450 TB w jednej obudowie to imponujące osiągnięcie inżynierii bit-hardware, ale co ważniejsze, pozwala systemowi korzystać z szeregu rozwiązań do zarządzania i integracji dostępnych dla obecnych serwerów Gen9 ProLiant. Należą do nich bezagentowe środowisko zarządzania iLO4, OneView do bardziej typowego zarządzania serwerami w przedsiębiorstwie oraz narzędzie HPE Insight Cluster Management Utility do zarządzania serwerami na dużą skalę w środowiskach HPC i Big Data z liczbą węzłów do 10 000. Połączenie oprogramowania do zarządzania sprawia, że platforma Apollo jest łatwa we wdrożeniu i jest jednym z – jeśli nie najsolidniejszym – dostępnych rozwiązań.
Pamięć masowa definiowana programowo nie jest przeznaczona wyłącznie do standardowych obciążeń aplikacji korporacyjnych. Jak pokazała firma HPE na przykładzie Apollo, a w szczególności modelu 4530, unikalna inżynieria sprzętowa może uwolnić ogromny potencjał oprogramowania w zakresie obsługi ogromnych zbiorów danych. W miarę jak coraz więcej organizacji wprowadza do przedsiębiorstw rozwiązania HPC i Big Data, tradycyjna infrastruktura prawdopodobnie nie będzie najlepszym sposobem na realizację tych inicjatyw. Co ważniejsze, aby te nowe programy odniosły sukces, niezbędny będzie sprzęt „klasy korporacyjnej” zaprojektowany specjalnie do tego celu. W niektórych miejscach opłacalność rozwiązań Whitebox jest bardzo wysoka, ale dla firmy, do której kieruje się HPE, kluczowe znaczenie ma zgodność sprzętu z istniejącymi protokołami zarządzania i obsługi serwerów. Niezależnie od tego, czy chodzi o iLO, OneView, CMU, czy o kombinację tych narzędzi w połączeniu z lokalnym wsparciem sprzętowym, Apollo 4530 to doskonałe rozwiązanie do realizacji projektów data mining i analityki na platformie specjalnie przygotowanej do tych konkretnych zadań.
Amazon