Kapalinové chlazení nabízí oproti tradičnímu vzduchovému chlazení značné výhody, zejména pro prostředí s vysokou hustotou výpočtů. Díky efektivnímu odvodu tepla od procesorů může kapalinové chlazení snížit spotřebu energie, provozní teploty a zlepšit celkový výkon systému. Systém SmartPlate od společnosti JetCool je vynikajícím vstupním bodem pro samostatné kapalinové chlazení s uzavřenou smyčkou – zejména pro prostředí, kde není možné použít plnou kapalinovou smyčku.
Přidání uzavřených smyček k výpočetním a grafickým serverům není nic nového; s uzavřenými smyčkami jsme se setkali u mnoha platform s vysokou hustotou serverů, jako jsou Dell, HPE a Lenovo. Tato technologie je skvělá, protože eliminuje potřebu složitých úprav infrastruktury, snižuje počáteční náklady a požadavky na průběžnou údržbu. Výhody systémů s uzavřenou smyčkou nejsou tak robustní jako u plné smyčky s CDU a vodou z provozovny, ale stále nabízejí mnoho výhod z hlediska energetické účinnosti.
JetCool je jméno, které se objevuje na veletrzích, jako je SuperCompute a naposledy na Dell Tech World v květnu. Získává si pozornost jako řešení pro vysoce výkonné úlohy, které jsou řízeny jak CPU, tak GPU. JetCool podporuje širokou škálu CPU a GPU od Intelu a AMD, jako je NVIDIA H100, ve formách socketů a rozšiřujících karet. JetCool také zveřejnil informace pro své inženýry, kteří se zabývají nově vznikajícími platformami, jako je GB200 Superchip, a architekturami CPU nové generace.
Zobrazit tento příspěvek na Instagram
Systém JetCool SmartPlate je nyní k dispozici po celém světě prostřednictvím společnosti Dell a jejích partnerských prodejců, kteří nabízejí komplexní globální servis, podporu a záruku. Přidání systému JetCool k serveru představuje zhruba 10% upgrade oproti základní ceně serverové konfigurace.
Abychom lépe pochopili, jak systém funguje, zaslali nám společnost JetCool k recenzi svůj systém Dell PowerEdge R760 s uzavřenou smyčkou.
Jaký je rozdíl mezi JetCoolem?
Patentovaná technologie mikrokonvekčního chlazení od společnosti JetCool cílí na horká místa pomocí kapalinových trysek, což ve srovnání s tradičními metodami zajišťuje vynikající přenos tepla a chladicí účinnost. Toto cílené kapalinové chlazení také zvyšuje účinnost, kdy Jetcool uvádí až o 50 % nižší spotřebu energie na chlazení a celkové snížení spotřeby energie o téměř 18 %. Toto řešení je vizuálně podobné jiným uzavřeným kapalinovým chladicím systémům, ale JetCool SmartPlates dělá zásadní rozdíl.
Schéma systému SmartPlate od Jetcool
Trysky kapaliny v systému SmartPlate tlačí chladicí kapalinu přes aktivní místa na čipu, čímž se teplo odvádí efektivněji než pasivním prouděním. Účinnost tohoto chladicího řešení umožňuje systému Jetcool provozovat chladivo o vyšší teplotě a zároveň dosahovat dobrého výkonu. Tato chladicí účinnost následně přispívá k energetické účinnosti chlazení a díky nižším požadavkům na proudění vzduchu snižuje nejen teplotu procesoru, ale i celého datového centra. Snížení teploty v datovém centru může snížit průběžné provozní náklady celého zařízení.
Většina poskytovatelů datových center staví svá zařízení v souladu s pokyny Americké společnosti pro vytápění, chlazení a klimatizaci (ASHRAE) a řídí se normami A1-A4. Tyto normy uvádějí doporučený teplotní rozsah 64.4 °C až 80.6 °C pro vzduchem chlazená datová centra. S výkonnějšími komponenty a náročnějšími výpočetními úlohami uvolňují novější servery s vysokou hustotou větší množství tepla. To datovým centrům přináší potíže, protože nové normy H1 organizace ASHRAE uvádějí, že prostředí by měla být chlazena na teplotu v rozmezí 64.4 °C až 71.6 °C. To s sebou nese možnost modernizace chladicích kapacit celého zařízení (což zvyšuje spotřebu energie a provozní náklady) nebo instalace systému kapalinového chlazení v celém zařízení. Obě tyto možnosti s sebou nesou obrovské počáteční náklady. V tomto případě se systém JetCool snaží pomoci přesunout chlazení do šasi serveru a snížit potřebu snižovat teplotu vzduchového chlazení a udržet potřeby v rámci typických pokynů ASHRAE A1-A4 a zároveň minimalizovat dopad na provozní náklady.
Další oblastí, kterou systémy SmartPlate od společnosti JetCool pomáhají zlepšit, je hlukové znečištění. Díky řešení SmartPlate mohou systémy běžet o 13 dBA tišeji díky sníženým otáčkám ventilátoru šasi. Tento tišší provoz snižuje hlukové znečištění zařízení a může pomoci snížit vibrace zařízení. Společnost JetCool uvádí, že toto snížení o 13 dBA snižuje hluk v zařízení až 4krát. Jejich studie modelu R760 zjistila, že hluk u vzduchem chlazeného systému začínal na 77.8 dBA a systém SmartPlate od společnosti JetCool dosáhl hodnoty 64.4 dBA.
Další významnou výhodou pro JetCool je snadné nasazení, protože jejich řešení nevyžaduje nic speciálního. Nasazení řešení JetCool má výrazně nižší náklady na nasazení a údržbu než systém DLC v datovém centru – dodatečné náklady na externí hardware, instalatérské práce, údržbu ani instalaci nejsou nutné. Samostatný systém JetCool může být značnou výhodou pro dosažení lepší efektivity při stejném prostoru, což šetří čas před přechodem na kompletní kapalinové chlazení s komponenty s vyšším výkonem.
Rozklad hardwaru JetCool
JetCool podporuje platformy s procesory Intel Xeon 4. a 5. generace a EPYC 4. generace. TDP těchto systémů je až 850 W v 1U šasi nebo až 1 200 W v 2U šasi. Systém JetCool podporuje teplotní rozsah vstupního vzduchu od 10 °C do 35 °C. Jak již bylo uvedeno, JetCool bude podporovat více čipů a GPU a práce na NVIDIA GB200 již probíhají.
Tato specifická platforma poskytovaná společností JetCool je postavena na platformě Dell Poweredge R760; specifikace jsou následující.
| Specifikace testovacího systému JetCool | |
|---|---|
| procesory | 2x Intel Xeon Platinum 8470Q (každý 52C 104T) |
| Memory | 768 GB (12x64g) 5600 MHz DDR5 |
Níže je fotografie platformy R760, kterou nám zaslala společnost Jetcool. Její komponenty jsou jasně viditelné a zdokumentované snímky a výkon společnosti JetCool jsou v souladu s tím, co jsme viděli v naší laboratoři.
Níže je fotografie poskytnutá společností JetCool, která ukazuje rozložení komponent v jejich řešení SmartPlate; ti, kteří nejsou obeznámeni s kapalinovým chlazením, uvidí několik dalších součástí, jako je chladič, čerpadla a nádržka.
Fotografie níže ukazuje čerpadlo, regulátor čerpadla a chladicí desky. Chladicí desky JetCool jsou na to, jak dobře chladí, ve srovnání s jinými řešeními docela tenké.
Jak je uvedeno výše, tento podivně tvarovaný kus v srdci systému je nádržka na chladicí kapalinu. Tato nádržka není velká, ale svou funkci plní dobře. Celý okruh pojme přibližně 10 ml kapaliny a během záruční životnosti serveru není nutné jej servisovat ani doplňovat.
Je také důležité si uvědomit, že i když je chladič blízko ventilátorů, proudí skrz šasi do zadní části systému dostatek vzduchu. Na obrázku výše je to špatně vidět, ale pod chladičem je také mezera pro proudění vzduchu k paměti DRAM.
Výkonný server Dell PowerEdge R760 s technologií JetCool
Obvykle bychom testovali systém jako je tento s chladiči chlazenými vzduchem a poté bychom vyměnili kapalinovou sadu, abychom získali výkonnostní čísla, nebo bychom porovnali kapalinový okruh se stejnými CPU ve vzduchem chlazeném serveru. Ani jedna z těchto možností nebyla tentokrát dobrou volbou, a tak jsme požádali jetCool o pomoc s vlastním testováním.
Společnost JetCool poskytla data o své platformě R760 v rámci interního testování. Tato čísla porovnávají otáčky ventilátorů, okolní teplotu, maximální teplotu CPU a celkovou spotřebu energie serveru. Ukazují, že i pod maximální kapacitou systému JetCool Smartplate dosahuje systém maximálního výkonu vzduchem chlazeného řešení s určitou rezervou režijních nákladů.
Výkon chlazeného vzduchem
| Rychlost ventilátoru %PWM | Okolní teplota (°C) měřená termočlánkem | Globální maximální teplota CPU (C) (CPU 1) | Globální maximální teplota CPU (C) (CPU 2) | Výkon serveru (Watty) |
|---|---|---|---|---|
| 100% | 24.8 | 62 | 62 | 1340.97 |
| 90% | 24.9 | 64 | 62 | 1279.8 |
| 80% | 24.3 | 65 | 64 | 1218.07 |
| 70% | 24.0 | 66 | 66 | 1171.23 |
| 60% | 23.9 | 67 | 68 | 1133.23 |
| 50% | 23.03 | 70 | 71 | 1094.87 |
Výkon JetCool SPS
| Rychlost ventilátoru %PWM | Okolní teplota (°C) měřená termočlánkem | Globální maximální teplota CPU (C) (CPU 1) | Globální maximální teplota CPU (C) (CPU 2) | Výkon serveru (Watty) |
|---|---|---|---|---|
| 100% | 24.6 | 57 | 56 | 1393.47 |
| 90% | 24.15 | 58 | 57 | 1327.95 |
| 80% | 23.9 | 59 | 58 | 1265.47 |
| 70% | 23.8 | 60 | 59 | 1217.43 |
| 60% | 23.7 | 62 | 62 | 1179.33 |
| 50% | 23.5 | 65 | 65 | 1149.70 |
Při zvažování rozdílu ve výkonu mezi ventilátory a systémem JetCool Smartplate dosáhly procesory v tomto systému teploty 62 °C, vzduchem chlazený systém dosahoval maximálních otáček ventilátoru a JetCool SPS pouze 60 %. Rozdíly v účinnosti chlazení, které dosahuje systém SPS od JetCoolu, vedly ke snížení spotřeby energie o 214 W při stejném výkonu. Toto snížení spotřeby energie vynásobené pouhými pěti servery představuje úsporu energie zhruba 1 kW.
| Air vs. JetCool | Rychlost ventilátoru %PWM | Okolní teplota (°C) měřená termočlánkem | Globální maximální teplota CPU (C) (CPU 1) | Globální maximální teplota CPU (C) (CPU 2) | Výkon serveru (Watty) |
|---|---|---|---|---|---|
| Vzduchem chlazené | 100% | 24.8 | 62 | 62 | 1393.47 |
| JetCool SPS | 60% | 23.7 | 62 | 62 | 1179.33 |
| Rozdíl | 214.14 |
Nespoléhali jsme se výhradně na data z JetCool. Následující graf ukazuje teplotní stabilitu řešení JetCool při konzistentním zatížení z našeho testování. Spustili jsme Y-Cruncher na Pi BBP Digit Extraction s 10 biliony číslic, což trvalo zhruba 40 minut.
V tomto testu jsme viděli, jak frekvence jádra klesla při zátěži na 2300 MHz a zůstala stabilní, až na pár skoků. Zde je testován systém SmartPlate, aby udržel stabilní teploty, a nezklamal. Během zhruba 40 minut konzistentní zátěže teplota procesoru vyskočila na 60 °C a vrcholu dosáhla pouze na 61 °C, po testu pak prudce klesla.
Srovnávací výkon
Kromě tepelných testů jsme spustili i standardní serverovou sadu. Nemáme sice dobré srovnání specializovaných kapalinou chlazených procesorů Intel „Q“, ale i tak zde prezentujeme data, pokud pomohou těm, kteří porovnávají výkon této sestavy s jinými, které jsme v minulosti recenzovali.
- Dell PowerEdge R760
- CPU: 2x Intel Xeon Platinum 8470Q (každý 52C 104T)
- Paměť: 768 GB (12x64g) 5600 MHz DDR5
Cinebench 2024
V testu Maxon Cinebench 2024 jsme zaznamenali 5 215 bodů na více jádrech, 71 bodů na jednom jádru a poměr MP 73.53x.
| Cinebench 2024 | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| Vícejádrový procesor | Body 5,215 |
| Jednojádrový procesor | Body 71 |
| Poměr MP | 73.53x |
Cinebench R23
V testu Maxon Cinebench R23 jsme zaznamenali 105 569 bodů v režimu více jader, 1 252 bodů v režimu jednoho jádra a poměr mp 84.32x.
| Cinebench R23 | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| Vícejádrový procesor | 105,569 |
| Jednojádrový procesor | 1,252 |
| Poměr MP | 84.32x |
Procesor Blenderu 4.0
V testování procesorů Blender 4.0 dosáhla platforma JetCool R760 skóre 930 390 pro Monster, 644 007 pro Junkshop a 473 364 pro Classroom.
| Procesor Blenderu 4.0 | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| Netvor | 948.049 |
| Veřejné haraburdí | 630.348 |
| Třída | 476.018 |
Procesor Blenderu 4.1
V testování procesorů Blender 4.1 dosáhla platforma JetCool R760 skóre 930 390 pro Monster, 644 007 pro Junkshop a 473 364 pro Classroom.
| Procesor Blenderu 4.1 | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| Netvor | 930.390 |
| Veřejné haraburdí | 644.007 |
| Třída | 473.364 |
CPU Geekbench 6
V testu Geekbench 6 dosáhl procesor JetCool R760 skóre 1 814 v jednojádrovém testu a 19 076 v vícejádrovém testu.
| CPU Geekbench 6 | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| Jednojádrové skóre | 1,814 |
| Vícejádrové skóre | 19,076 |
Test rychlosti Blackmagic RAW
V testu Blackmagic Raw Speedtest jsme u grafických karet Dual Xeon Platinum 8470Q zaznamenali 141 FPS.
| Blackmagic RAW | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| 8K procesor | 141 FPS |
Test rychlosti disku Blackmagic
V rámci testu Blackmagic Disk Speedtest testujeme konfiguraci pro čtyři disky Dell NVME SSD v RAID0.
| Test rychlosti disku Blackmagic | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| Napsat | 11,704.1 MB/s |
| číst | 9,762.7 MB/s |
Y-Cruncher
y-cruncher je vícevláknový a škálovatelný program, který dokáže vypočítat pí a další matematické konstanty na biliony číslic. Od svého uvedení na trh v roce 2009 se stal populární aplikací pro benchmarking a zátěžové testování pro přetaktovače a hardwarové nadšence. V tomto ohledu byla platforma JetCool působivě rychlá napříč všemi funkcemi.
| Y-Cruncher | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| 1B | 5.270 sekund |
| 2.5B | 14.405 sekund |
| 5B | 31.490 sekund |
| 10B | 67.704 sekund |
| 25B | 191.599 sekund |
| 50B | 423.891 sekund |
7-Zip
Oblíbený nástroj 7-Zip obsahuje benchmarky paměti a CPU, které používáme pro testování výkonu.
| 7 Zip | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| Komprese | |
| Aktuální využití CPU | 3,546% |
| Jmenovitý proud / Spotřeba | 4.849 GIPS |
| Proud | 171.925 GIPS |
| Výsledné využití CPU | 2,551% |
| Výsledné hodnocení / využití | 4.879 GIPS |
| Výsledné hodnocení | 173.263 GIPS |
| Dekomprese | |
| Aktuální využití CPU | 3,865% |
| Jmenovitý proud / Spotřeba | 4.060 GIPS |
| Proud | 156.886 GIPS |
| Výsledné využití CPU | 3,880% |
| Výsledné hodnocení / využití | 4.038 GIPS |
| Výsledné hodnocení | 156.689 GIPS |
| Celkové hodnocení | |
| Celkové využití CPU | 3,716% |
| Celkové hodnocení / Použití | 4.458 GIPS |
| Celkové hodnocení | 164.976 GIPS |
UL Procyon 2.7 Počítačové vidění s umělou inteligencí
U UL Procyon AI Computer Vision jsme zaznamenali poměrně rychlé inferenční časy až do REAL-ESRGAN. Celkové skóre jsme také dosáhli 141 bodů. V tomto testu byly pro inferenční analýzu použity procesory Xeon Platinum 8470Q.
Pro srovnání s jinými stroji UL oznámila, že všechny verze Procyonu před verzí 2.7 nebudou srovnatelné kvůli odlišnému bodování.
| Časy inference Procyon | JetCool R760 (2x Xeon Platinum 8470Q, 768GB DDR5) |
|---|---|
| Celkové skóre | 141 |
| MobileNet V3 | 7.53 ms |
| ResNet50 | 9.14 ms |
| Počátek V4 | 29.64 ms |
| DeepLab V3 | 26.52 ms |
| YOLO V3 | 31.51 ms |
| REAL-ESRGAN | 1,123.52 ms |
Závěr
Díky patentovaným konfiguracím trysek JetCool, lokalizovanému chlazení a nižším tlakovým nárokům ukazují chladiče JetCool SmartPlates svou výhodu oproti tradičním chladičům. Toto řešení navíc není složité a JetCool má několik zábavných triků, jako například patentované trysky v chladičích SmartPlates, které vhánějí chladivo do aktivních míst. V zásadě však platí, že pokud by vaše organizace měla R760 s JetCool, nepoznáte to zvenčí, ledaže byste si všimli tichého provozu ve srovnání se vzduchem chlazenými servery.
Společnost JetCool v roce 2023 publikovala ve spolupráci se společností Sabey Data Centers případovou studii, v níž vyhodnotila rozdíly v účinnosti testovaných serverů Poweredge R740XD. „V hodnocení společnosti Sabey zaznamenal server chlazený systémem SmartPlate o 13.5 % nižší spotřebu energie než servery chlazené vzduchem. Protože kapalné chladivo systému absorbuje teplo přímo z elektronických součástek prostřednictvím chladicích desek, eliminuje se potřeba intenzivního proudění vzduchu, což výrazně snižuje otáčky ventilátorů.“ Společnost Sabey také zaznamenala mnoho dalších výhod, včetně nižší teploty výfukových plynů a menšího zatížení vzduchotechnických jednotek. Zbytek případové studie společnosti Sabey naleznete zde.
Datová centra se již nyní usilovně zabývají otázkou, jak zvládnout obrovské energetické nároky moderních serverů kvůli obrovské spotřebě energie CPU a GPU, a kapalinové chlazení je jediným řešením, jak tyto potřeby zvládnout. Naštěstí existuje mnoho možností kapalinového chlazení, ale ne každý si může nebo chce dovolit plnohodnotný kapalinový okruh s přípojkou na vodu, zabývat se imerzní nádrží nebo zvládat složité chemikálie. Pro ty, kteří chtějí výhody kapalinového chlazení využívat již dnes bez složitostí, je JetCool vynikající alternativou.





Amazon