Dell EMC PowerEdge C6525 je 2U server navržený pro řešení potřeb vysoce výkonných prostředí s vysokou hustotou výpočtů, jako jsou HPC úlohy. Protože název/číslo končí na „5“, znamená to, že C6525 je server založený na procesoru AMD EPYC, který podporuje procesory 7002 i 7003. Druhý jmenovaný se vyznačuje vyšším výkonem (více jader a vláken), větší kapacitou RAM a možnostmi PCIe Gen4. C6525 má čtyři uzly, které umožňují použití dvou procesorů AMD EPYC, což v clusteru 2U umožňuje celkem 512 jader, 1024 vláken a až 8 TB paměti.
Protože se jedná o server řady C, je tento server zaměřený na cloud. Velká část tajné přísady tohoto serveru spočívá v designu hardwaru, na který se blíže podíváme v naší části o návrhu a konstrukci. Stručně řečeno, v rámci tohoto 2U formátu byla společnost Dell Technologies schopna umístit čtyři uzly, z nichž každý může mít dva procesory AMD EPYC, celkem osm. I když to umožňuje opravdu hustý výpočetní výkon (skvělé pro digitální výrobu, výzkum a webové technologie), může to omezit další možnosti, jako je celkové úložiště. S ohledem na dané případy použití je to však menší problém.
Stejně jako všechny produkty od společnosti Dell, i server Dell EMC PowerEdge C6525 nabízí skvělé možnosti zabezpečení a správy, včetně Dell EMC OpenManage, iDRAC a dokonce i vSphere. Zabezpečení je dále vylepšeno pomocí technologií AMD Secure Memory Encryption (SME) a Secure Encrypted Virtualization (SEV). Server využívá křemíkový kořen důvěry a udržuje bezpečnost firmwaru serveru pomocí digitálně podepsaných balíčků firmwaru.
Specifikace serveru Dell EMC PowerEdge C6525
| Procesor | Konfigurace s jedním nebo dvěma procesory AMD EPYC 2. nebo 3. generace na uzel s až 64 jádry na procesor a až 280 W (TDP) |
| Memory | Až 16x DDR4 RDIMM 2TB max. LRDIMM 2TB max. Šířka pásma až 3200 MT/S |
| dostupnost | Redundantní pevné disky, ventilátory, zdroje s možností výměny za provozu |
| řadiče | HW RAID: port PERC 10.4 pro čipsety H745, H345, HBA345 SW RAID (S150): Ano |
| Šachta | 2.5" konfigurace s přímou propojovací deskou s až 6 disky SAS/SATA na uzel, až 24 na šasi Konfigurace 2.5" NVMe Backplane s až 2 NVMe disky a 4 SAS/SATA disky na uzel. Celkem až 24 disků na šasi. 3.5" konfigurace s přímou propojovací deskou s až 3 disky SAS/SATA na uzel, až 12 na šasi Interní: microSD karta | M.2 SATA BOSS 1.0 |
| Napájecí zdroje | Duální redundantní napájecí zdroj AC s výkonem 2000 W a 2400 W s možností výměny za provozu Duální redundantní 2000W AC/DC Mixmode napájecí zdroj s možností výměny za provozu Možnosti chlazení: Vzduchové chlazení, Přímé kapalinové chlazení (DLC) |
| Fanoušků | Ventilátory s možností výměny za provozu |
| Rozměry | Výška: 86.8 mm (3.4 palce) Šířka: 448.0 mm (17.6 palce) Hloubka: 790.0 mm (31.1 palců) Hmotnost 45.53 kg (100.3 liber) 3.5” šasi s přímou zadní deskou 41.5 kg (91.4 liber) 2.5” šasi s přímou/NVMe zadní deskou 35.15 kg (77.4 liber) bez šasi s propojovací deskou |
| Regálové jednotky | Rackový server 2U/4N |
| Vestavěná správa. | iDRAC9 RESTful API iDRAC s RedfishiDRAC Direct |
| Vestavěná karta NIC | Jednoportový 1GbE LOM |
| Možnosti sítě (NDC) | 1x OCP 3.0 |
| Možnosti GPU | 1x GPU s jednou šířkou |
| porty | Zadní porty: 1 x port micro-USB pro přímý přístup k iDRAC 1 x Mini-DisplayPort 1 port iDRAC nebo síťové karty 1 x USB portu 3.0 |
| PCIe | 2x rozšiřující karty PCIe x16 Gen4 1x OCP 3.0 x16 Gen4 1x rozšiřující modul PCIe x8 Gen3 M.2 |
| Operační systémy a hypervizory | Kanonický server Ubuntu LTS CentOS založený na jádře RHEL 8.0 Citrix Hypervisor Microsoft Windows Server s technologií Hyper-V Red Hat Enterprise Linux SUSE Linux Enterprise Server VMware ESXi |
Návrh a sestavení serveru Dell EMC PowerEdge C6525
Jak již bylo uvedeno, Dell EMC PowerEdge C6525 je server o výšce 2U. V závislosti na konfiguraci má přední strana serveru buď 24 2.5" pozic, nebo 12 3.5" pozic. Na obou stranách se nachází ovládací panel s funkcemi, jako je tlačítko napájení a LED indikátory. Na pravé straně je informační štítek.
Otočíme-li server dozadu, vidíme čtyři uzly. Každý z nich má nahoře dva sloty PCIe, uprostřed uvolňovací páčku a vpravo zámek. V pravém dolním rohu každého uzlu se nachází také slot pro kartu OCP 3.0 SFF. Pro připojení je k dispozici port USB 3.0, port iDRAC nebo NIC, port Mini DisplayPort a port iDRAC Direct Micro-USB. Uzlový modul má také LED diodu pro identifikaci systému a štítek EST.
Po vytažení saní vidíme dva procesory a okolní RAM. Mezi procesory je vzduchový kryt. V blízkosti procesorů se nachází rozšiřující slot M.2 pro bootovací disky, aniž by to bránilo využití předních pozic pro disky.
Správa serveru Dell EMC PowerEdge C6525
Řízení iDRAC jsme v minulosti probírali několikrát a zde jsme se do něj pustili do hloubky. Použili jsme také iDRAC pro správu serveru Dell EMC PowerEdge C6525. Každý uzel je spravován samostatně, bez většího povědomí o okolních uzlech nebo šasi. To je na rozdíl od platforem, jako je Dell EMC FX2, které tuto vrstvu zahrnují. Pro tuto aplikaci to bez sdílených zdrojů mezi uzly tolik nehraje roli.
U sdílených hardwarových prvků, jako jsou ovládání ventilátorů, vítězí z hlediska chladicího profilu uzel s nejvyššími nároky. Pokud je jeden uzel horký, ale tři jsou studené, šasi se bude chovat, jako by byly horké všechny. Prvním je řídicí panel. Zde uživatelé získají rychlý přehled o všem, včetně systémové nápovědy, informací, souhrnů úloh a posledních protokolů. Najdete zde také možnost elegantně vypnout server.
Na kartě Systém se můžeme podívat na různé komponenty. Kliknutím na CPU/Akcelerátory můžeme vidět, jaké CPU běží na jednotlivých uzlech (v tomto případě AMD EPYC 7452).
Důležitou stránkou serverů PowerEdge je jejich schopnost udržovat chlad i při provozu vysoce výkonných součástí, které generují teplo. I když je lze nastavit na maximální výkon, není nutné server tímto způsobem provozovat neustále. Uživatelé si místo toho mohou přejít do konfigurace a upravit konfiguraci chlazení podle svých potřeb.
Společnost Dell si usnadňuje správu svých platforem pomocí řadiče iDRAC, který umožňuje provádět změny na úrovni systému BIOS u každého uzlu, aniž by bylo nutné ručně zadávat změny do samotného systému BIOS. Jakmile jsou změny naplánovány, projeví se při dalším restartu.
Výkon serveru Dell EMC PowerEdge C6525
Konfigurace Dell EMC PowerEdge C6525, 4 uzly, každý s:
- 2 x Procesory AMD EPYC 7452
- 128GB DDR4 RAM
- 2 x SSD disky Micron 9300 s kapacitou 3.84 TB a technologií NVMe
- 1 x M.2 bootovací SSD
Výkon MySQL v Sysbench
Náš první benchmark pro lokální úložiště se skládá z databáze Percona MySQL OLTP měřené pomocí SysBench. Tento test měří průměrný počet transakcí za sekundu (TPS), průměrnou latenci a také průměrnou latenci 99. percentilu.
Každý virtuální počítač Sysbench je nakonfigurován se třemi virtuálními disky: jedním pro bootování (~92 GB), jedním s předpřipravenou databází (~447 GB) a třetím pro testovanou databázi (270 GB). Z hlediska systémových zdrojů jsme každý virtuální počítač nakonfigurovali s 16 virtuálními procesory (vCPU), 60 GB paměti DRAM a využili jsme řadič LSI Logic SAS SCSI.
Konfigurace testování Sysbench (na virtuální počítač)
- CentOS 6.3 64bitový
- Percona XtraDB 5.5.30-rel30.1
-
- Databázové tabulky: 100
- Velikost databáze: 10 000 000
- Vlákna databáze: 32
- Vyrovnávací paměť RAM: 24 GB
- Délka testu: 3 hodiny
-
- 2 hodiny předběžné přípravy 32 vláken
- 1 hodina 32 vláken
V testu Sysbench OLTP jsme dosáhli celkového skóre 49 701 TPS, přičemž jednotlivé uzly dosáhly souhrnných hodnot mezi 12 170 TPS a 12 606 TPS. I bez špičkových CPU a skromného množství paměti DRAM nabízel Dell EMC C6525 obrovský výkon v provedení 2U.
S průměrnou latencí jsme zaznamenali celkovou hodnotu 10.3 ms, přičemž jednotlivé uzly dosáhly hodnoty mezi 10.15 ms a 10.51 ms.
Pro náš nejhorší možný scénář latence (99. percentil) nám C6525 poskytl souhrnnou hodnotu pouze 18.3 ms, přičemž jednotlivé uzly dosáhly 18.01 ms až 18.8 ms.
Analýza pracovní zátěže VDBench
Pokud jde o benchmarking úložných polí, nejlepší je testování aplikací a syntetické testování je až na druhém místě. I když syntetické testy nepředstavují dokonalou reprezentaci skutečného zatížení, pomáhají stanovit základní parametry úložných zařízení s faktorem opakovatelnosti, což usnadňuje porovnávání konkurenčních řešení.
Tyto úlohy nabízejí řadu různých testovacích profilů, od testů „čtyř rohů“, přes běžné testy velikosti přenosu databáze až po zachycení trasování z různých prostředí VDI. Všechny tyto testy využívají společný generátor úloh vdBench se skriptovacím enginem k automatizaci a zachycení výsledků v rámci velkého clusteru výpočetních testů. To nám umožňuje opakovat stejné úlohy napříč širokou škálou úložných zařízení, včetně flash polí a jednotlivých úložných zařízení.
Profily:
- Náhodné čtení 4K: 100% čtení, 128 vláken, rychlost čtení 0–120 %
- Náhodný zápis 4K: 100% zápis, 128 vláken, rychlost zápisu 0–120 %
- 64K sekvenční čtení: 100% čtení, 32 vláken, rychlost čtení 0–120 %
- 64K sekvenční zápis: 100% zápis, 16 vláken, rychlost zápisu 0–120 %
- Syntetická databáze: SQL a Oracle
- Trasování úplného klonu VDI a propojených klonů
Pro výkon VDBench se zaměřujeme na každý uzel a jeho výkon, a také na agregaci.
Při náhodném čtení 4K dat si všechny uzly vedly víceméně stejně, přičemž jeden uzel dosáhl vrcholu 1 320 861 IOPS s latencí 191 µs. Celkem by všechny uzly dosáhly zhruba 5.2 milionu IOPS.
V režimu náhodného zápisu 4K se SSD disky v jednotlivých uzlech nesledovaly tak blízko sebe. Uzel 4 dosáhl nejvyššího maxima 411 075 IOPS s latencí 337 µs. Celkový maximální počet se zvýšil na více než 1.2 milionu IOPS.
Při přechodu na sekvenční práci s našimi 64K úlohami jsme při čtení opět zaznamenali, že uzly se pohybovaly mnohem blíže u sebe. Nejvyšší vrchol jednoho uzlu byl přibližně 107K IOPS neboli 6.7 GB/s při latenci 488 µs. Celkové skóre by bylo přibližně 428K IOPS neboli 26.8 GB/s.
U rychlosti zápisu 64 tisíc úderů opět vidíme, jak se výkon jednotlivých uzlů od sebe liší. Nejvyššího vrcholu jednoho uzlu dosahuje opět uzel 4 s 38 504 IOPS neboli 2.4 GB/s při latenci 828 µs. Kombinací všech maximálních skóre získáme 137 tisíc IOPS neboli 8.5 GB/s.
Naše další sada testů se týká našich SQL úloh: SQL, SQL 90-10 a SQL 80-20. Počínaje SQL, všechny čtyři uzly na serveru Dell EMC PowerEdge C6525 byly opět velmi blízko u sebe. Nejvyšší vrchol jednoho uzlu byl 409 064 IOPS při 157 µs. Celkový vrchol posunul IOPS o více než 1.6 milionu.
S SQL 90-10 uzly víceméně cestovaly společně až do konce, kdy uzel 4 opět dosáhl vrcholu 391 425 IOPS s latencí 154 µs. Kombinované vrcholy dosahují více než 1.5 milionu IOPS.
V SQL 80-20 se výkon uzlů trochu lišil. Uzel 2 dosáhl nejvyššího výkonu s 340 626 IOPS a latencí 176 µs. Dohromady všechny uzly dosahují výkonu přes 1.34 milionu IOPS.
Další na řadě jsou naše úlohy Oracle: Oracle, Oracle 90-10 a Oracle 80-20. Počínaje Oracle, čtyři uzly se vzájemně dobře srovnávaly, přičemž spolehlivý uzl číslo 4 dosáhl nejvyššího výkonu 327 398 IOPS s latencí 188 µs. Celkový výkon tak přesahuje 1.26 milionu IOPS.
Oracle 90-10 měl uzly z větší části těsněji zarovnané, ačkoli uzel 4 opět dosáhl nejvyššího výkonu s 325 058 IOPS a latencí 132 µs. Kombinovaný výkon dosahuje více než 1.25 milionu IOPS.
Při pohledu na Oracle 80-20 jsou uzly od sebe trochu více rozmístěny, ale víceméně spadají do stejné řady. Uzel 4 je na prvním místě s 297 033 IOPS. Celkový výkon činí přes 1.1 milionu IOPS.
Dále jsme přešli k našemu testu klonů VDI, Full and Linked. Při spouštění VDI Full Clone (FC) běžely všechny čtyři uzly poměrně blízko sebe, přičemž šťastný uzel č. 4 dosáhl nejvyššího výkonu 312 464 IOPS a latence 202 µs. Kombinací těchto vrcholů se dostaneme k více než 1.2 milionu IOPS.
S počátečním přihlášením k VDI FC se uzel na konci opravdu rozpadl. Uzel 4 dosáhl nejvyššího výkonu s 84 792 IOPS a latencí 449 µs. Kombinovaný výkon dosahuje více než 331 tisíc IOPS.
Pondělní přihlášení do VDI FC zaznamenalo ke konci další odchylku ve výkonu uzlů. Nejvyšší výkon jednoho uzlu byl 84 346 IOPS s latencí 310 µs. Celkový výkon přesáhl 323 tisíc IOPS.
U spouštění VDI Linked Clone (LC) si uzel opět počínaje výkonem velmi blízkým. Jeden uzel dosáhl vrcholu 158 820 IOPS s latencí 196 µs. Kombinovaný výkon se vyšplhal na více než 628 tisíc IOPS.
Počáteční přihlášení do VDI LC zaznamenalo ke konci mírný rozdíl ve výkonu uzlu. Nejvyšší výkon jednoho uzlu byl 48 484 IOPS s latencí 272 µs. Celkový výkon nám přináší více než 181 tisíc IOPS.
Nakonec jsme u testu VDI LC Monday Login pozorovali rozdíly ve výkonu uzlů. Nejvyšší výkon jednoho uzlu byl kolem 53 tisíc IOPS a 450 µs. Kombinovaný špičkový výkon byl přes 197 tisíc IOPS.
Závěr
Dell EMC PowerEdge C6525 je 2U server určený pro cloudové nasazení. Server je hustě osazen čtyřmi uzly a je vybaven procesory AMD EPYC (ten, který je zde testován, má druhou generaci , ale Dell nabízí i C6525 s procesory EPYC třetí generace ) s potenciálním celkovým počtem 512 jader a 1 024 vláken. CPU umožňují celkem 2 TB paměti DDR4 3200 MT/S na uzel. Každý uzel může obsahovat dva procesory AMD EPYC, dvě pozice PCIe, slot OCP 3.0 a integrovaný SSD disk m.2 pro bootování. To umožňuje nejrůznější výpočetní operace, existuje však omezení, kolik úložiště se do serveru vejde. S konfigurací šasi s 2.5″ disky lze každému uzlu přiřadit 6 disků, z nichž až dva jsou NVMe s příslušnou backplane.
Pokud jde o výkon aplikací, podívali jsme se na VDBench. Testovali jsme jednotlivé uzly a podívali se na skóre jako celek. To uživatelům poskytuje představu o tom, jak každá část funguje, a také obrázek o celkovém výkonu. V analýze pracovní zátěže aplikací jsme spustili pouze Sysbench. V transakční analýze jsme zaznamenali celkové skóre 49 701 TPS. V průměrné latenci nám server naměřil celkovou latenci 10.3 ms. V našem nejhorším scénáři měl C6525 celkové skóre pouze 18.3 ms.
V našem testu VDBench nám souhrnný výkon čtyř uzlů poskytl 5.2 milionu IOPS při čtení 4K, 1.2 milionu IOPS při zápisu 4K, 26.8 GB/s při čtení 64K a 8.5 GB/s při zápisu 64K. V našich SQL úlohách jsme zaznamenali maxima 1.6 milionu IOPS, 1.5 milionu IOPS v SQL 90-10 a 1.34 milionu IOPS v SQL 80-20. V Oracle dosáhl celý server více než 1.26 milionu IOPS, 1.25 milionu IOPS v Oracle 90-10 a 1.1 milionu IOPS v Oracle 80-20. Další byly naše klonované testy VDI, plné i propojené. V FC jsme zaznamenali bootování 1.2 milionu IOPS, počáteční přihlášení bylo přibližně 331 tisíc IOPS a přihlášení v pondělí přibližně 323 tisíc IOPS. S LC bootem to bylo přibližně 628 tisíc IOPS, počáteční přihlášení 181 tisíc IOPS a pondělní přihlášení 197 tisíc IOPS.
Také jsme se podívali na výkon jednoho uzlu ve VDBench, kde byly pozorovány určité rozdíly ve výkonu. Vzhledem k menší velikosti skupiny SSD je většina těchto rozdílů s největší pravděpodobností spojena se samotnými SSD disky. Výkon jednoho uzlu nám poskytl 1.3 milionu IOPS při čtení 4K, 411 tisíc IOPS při zápisu 4K, 6.7 GB/s při čtení 64K a 2.4 GB/s při zápisu 64K. V našich SQL úlohách jsme zaznamenali maxima 409 tisíc IOPS, 391 tisíc IOPS v SQL 90-10 a 341 tisíc IOPS v SQL 80-20. V Oracle dosáhl celý server více než 327 tisíc IOPS, 325 tisíc IOPS v Oracle 90-10 a 297 tisíc IOPS v Oracle 80-20. Další byly naše klonované testy VDI, plné a propojené. V FC jsme zaznamenali bootování s výkonem 312 tisíc IOPS, počáteční přihlášení bylo přibližně 85 tisíc IOPS a pondělní přihlášení bylo přibližně 84 tisíc IOPS. V LC bylo bootování s výkonem přibližně 159 tisíc IOPS, počáteční přihlášení bylo 48 tisíc IOPS a pondělní přihlášení bylo 53 tisíc IOPS.
Dell EMC PowerEdge C6525 je hustý server o velikosti 2U, který pojme čtyři uzly a až osm procesorů AMD EPYC. Server dokáže na své malé rozměry poskytovat obrovský výkon, ale na úkor úložiště. C6525 je v konečném důsledku určen pro výpočetně náročné cloudové aplikace, které mohou těžit z této elitní kombinace výkonu a hustoty. Pro ty, kteří takovou kombinaci potřebují, je C6525 fenomenální volbou.
Amazon