Dell Tech World se destaca no solo por los sólidos lanzamientos de productos de Dell, sino también por las soluciones que sus socios exhibieron en la exposición. Nada atrajo más atención este año que la variedad de soluciones de refrigeración líquida en la feria. Hay tanto interés en la refrigeración líquida que nuestros videos en las redes sociales que destacan estas tecnologías han obtenido millones de visitas solo en las últimas semanas. A menos que sus cargas de trabajo sean completamente mundanas, la refrigeración líquida llegará a su centro de datos. Aquí hay una introducción que destaca qué tecnologías pueden ser adecuadas, dependiendo de dónde se encuentre en el ciclo de refrigeración líquida.
Bucle interno directo al chip
La forma más sencilla de implementar refrigeración líquida en un centro de datos es mediante un circuito cerrado interno. Al igual que un disipador de CPU en un PC para juegos, estos sistemas utilizan una placa fría con un radiador de gran tamaño para disipar el calor de los componentes clave. JetCool ofrece soluciones de este tipo; de hecho, mostraron sistemas Intel y AMD de Dell con un circuito cerrado interno.
Ver esta publicación en Instagram
La mejor parte de estos sistemas es que ofrecen importantes ahorros de energía, entre un 10 % y un 15 % según JetCool, sin la complejidad de recurrir al agua de las instalaciones. En algunos centros de datos, es posible que un circuito de refrigeración líquida completo ni siquiera sea una opción, por lo que este método constituye la mejor alternativa a los servidores refrigerados por aire.
Bucle interno JetCool
Si bien el ahorro de energía con un circuito cerrado no será tan alto como el de otras alternativas, incluso un ahorro del 10% es enorme en los centros de datos que se ven obstaculizados por la cantidad de energía que pueden soportar en un solo bastidor. Un pequeño ahorro de energía, gracias a un circuito interno cerrado, puede significar soporte para uno o dos servidores adicionales por rack.
También cabe destacar que Dell utiliza un circuito interno en el servidor GPU PowerEdge XE8640; puedes ver más información al respecto, así como sobre el XE9640, en un vídeo de YouTube que publicamos recientemente.
Bucle de líquido completo directo al chip
La progresión desde un circuito interno es una que está conectada al agua de la instalación, para ayudar a eliminar el calor no solo de los servidores, sino también del centro de datos. Sin embargo, existen soluciones a medias; en una reseña reciente, presentamos CoolIT Systems donde adaptamos un R760 para refrigeración líquida , agregando placas frías. También instalamos un pequeño colector y una unidad de distribución de refrigerante, aunque nuestra CDU es de líquido a aire. Esto significa que estamos extrayendo el calor del R760, pero aún lo estamos liberando al centro de datos y necesitamos eliminarlo.
Nuestra mini implementación puede dar soporte a algunos servidores, pero si desea estar preparado para el nuevo servidor GPU Dell PowerEdge XE9680L con refrigeración líquida , por ejemplo, necesitará una solución más robusta. CoolIT ha sido una parte importante de la hoja de ruta de refrigeración líquida de Dell hasta el momento, y estuvieron mostrando sus nuevas placas frías Omni , nuevas unidades de refrigeración (CDU) y una variedad de otras tecnologías de refrigeración.
Pero incluso la refrigeración directa al chip no es una solución única; existen múltiples maneras de implementarla. Esto se evidencia claramente en la solución de ZutaCore , que utiliza un enfoque único de dos fases para refrigerar los chips. ZutaCore realizó varias demostraciones, destacando un servidor GPU XE9680 modificado con 14 placas de refrigeración: 8 para las GPU, 4 para los conmutadores y 2 para las CPU. Se trata de una tecnología muy interesante, sobre la cual tenemos un extenso podcast si desea obtener más información.
Ver esta publicación en Instagram
Para resaltar otra versión más de enfriamiento directo a chip, resaltaré Chilldyne. Aunque técnicamente no estuvimos en la exposición DTW, nos reunimos con algunos miembros de su equipo en un bar del hotel, que en nuestra opinión está bastante cerca. Para ser justos, Chilldyne es socio de Dell; hemos visto su kit en los laboratorios de Dell.
La fama de Chilldyne es un circuito de líquido de presión negativa, lo que significa que si se corta una línea, no hay pérdida de líquido. Las fugas son el principal temor que frena la adopción de líquidos en el centro de datos, por lo que Chilldyne definitivamente tiene algo en mente. Hemos elaborado un vídeo breve que destaca su tecnología, que es uno de nuestros vídeos sociales más populares de este año.
Ver esta publicación en Instagram
Intercambiadores de calor de puerta trasera (RDHx)
Los intercambiadores de calor de puerta trasera pueden ser intercambiadores de calor pasivos o activos que reemplazan la puerta trasera de un rack de servidores. Básicamente, absorben el calor del aire de escape del servidor y lo descargan a un circuito de líquido para enfriarlo. Las puertas pasivas son esencialmente silenciosas y no tienen ventiladores. Active RDHx puede agregar ventiladores al RDHx para una mayor eficiencia.
Si bien RDHx no era una gran parte de DTW, vale la pena mencionarlos por dos razones clave, en dos extremos del espectro. Primero, son un primer paso relativamente fácil para agregar refrigeración líquida a su centro de datos y se pueden implementar en una variedad de configuraciones independientes. Alternativamente, RDHx se puede combinar con otras tecnologías de refrigeración líquida para lograr una recuperación del calor del 100 % mediante refrigeración líquida, algo que fue un tema de conversación en Las Vegas la semana pasada.
Liebert DCD50 RDHx
Los RDHx están disponibles de una u otra forma en prácticamente cualquier proveedor que trabaje con arquitecturas de rack, incluidas empresas presentes en Dell Tech World como CoolIT y Vertiv . Cabe destacar que Dell promociona los RDHx como parte de la estrategia XE9680L : «Un diseño de 70 kW que utiliza refrigeración por aire con intercambiadores de calor de puerta trasera (RDHx), compatible con 64 GPU, ideal para NVIDIA H100/H200/B100. También contamos con un diseño de 100 kW que utiliza refrigeración líquida con RDHx, compatible con 72 GPU B200; esta es la arquitectura de rack más compacta del sector».
Refrigeración líquida por inmersión total
Hasta ahora, todas las opciones de refrigeración líquida para centros de datos que he mencionado son bastante comunes. La inmersión total es donde, según los comentarios que estamos recibiendo, las cosas se complican un poco. Como su nombre indica, esta tecnología consiste básicamente en tomar servidores estándar, con algunas modificaciones, y sumergirlos en un fluido especialmente diseñado (refrigerantes dieléctricos patentados). BP y Shell fabrican fluidos para este fin, entre otros. Llevamos tres o cuatro años viendo racks de inmersión total en ferias como DTW. Este año, tanto Submer como GRC ofrecieron demostraciones de inmersión.
Ver esta publicación en Instagram
La idea del enfriamiento por inmersión monofásico (el de dos fases tuvo un momento pero en gran medida ha caído en desgracia) tiene sentido en muchos sentidos y es uno de los favoritos entre los mineros criptográficos. Al considerar servidores empresariales como PowerEdge, las reglas cambian un poco. Con los servidores, el primer paso es quitar los ventiladores, lo que ofrece ahorros de energía inmediatos. La convección, o convección asistida con bombas, mueve el fluido sobre los componentes del servidor. Desde allí, el calor se puede capturar mediante un intercambiador de calor y eliminarlo del centro de datos.
Este sistema eliminó la necesidad de refrigeración por aire y tanto GRC como Submer señalan datos que sugieren que los servidores con refrigeración por inmersión en realidad tienen una vida útil más larga y menos eventos de servicio que los servidores refrigerados por aire. Pero aquí radica uno de los mayores obstáculos: los servidores tienen que salir del grupo para recibir servicio y, si bien eso no es difícil, es más complicado que dar servicio al equipo tradicionalmente en rack. Un servidor en inmersión debe salir del líquido, secarse un poco y luego colocarse sobre una mesa para su servicio. No es una acción imposible, pero sí que requiere un poco de esfuerzo.
Existen otras preocupaciones respecto al peso de los tanques y la eficiencia en el uso del espacio y los fluidos, en comparación con los sistemas verticales estándar. La industria de la inmersión argumenta que los tanques se pueden apilar y que los sistemas instalados en tanques de inmersión son, de hecho, más eficientes. Tenemos un buen podcast sobre inmersión si desea obtener más información.
Conclusión
No hay forma de impedir que la refrigeración líquida llegue a su centro de datos si su organización utiliza IA u otras aplicaciones que utilizan cajas de GPU densas. Es muy probable que si compra un servidor GPU de 8 vías hoy, cuando aparezca en su base de carga dentro de un año, tenga un circuito cerrado en su interior si no ha invertido en un circuito líquido completo para ese momento. . La buena noticia es que la industria está identificando los problemas que obstaculizan la adopción, como la falta de conectores múltiples universales, y trabajando para resolverlos, de modo que la refrigeración líquida sea más fácil de adoptar para las empresas.
Amazon