Refrigeración líquida: la tecnología de refrigeración de próxima generación para centros de datos y clústeres de servidores

Sep 19, 2024

Dejar un mensaje

 

I Descripción general de la industria de la refrigeración líquida

 

1. Historia del desarrollo de la refrigeración líquida

En cuanto a la historia de los servidores refrigerados por líquido, IBM fue el primero en desarrollar en 1967 la computadora System360 con un sistema de refrigeración por agua fría.

 

Aunque la industria de refrigeración líquida de China se desarrolló relativamente tarde, su tecnología ha avanzado rápidamente. En 2011, Sugon fue pionera en la industria de la refrigeración líquida en China. Durante los siguientes cinco años, empresas chinas como Huawei, Inspur y Sugon comenzaron a ingresar al mercado y aumentar la producción. Desde 2019, la tecnología de refrigeración líquida ha logrado avances significativos entre los principales fabricantes.

 

Development history ofliquid coolingindustry at home and abroad

▲ Historia del desarrollo de la industria de refrigeración de líquidos en el país y en el extranjero

 

2. Cadena industrial de servidores refrigerados por líquido

El ecosistema de la industria de refrigeración líquida abarca los sectores ascendentes, intermedios y descendentes, incluidos los proveedores de componentes ascendentes, los proveedores de servidores refrigerados por líquido intermedios y los usuarios de potencia informática descendentes.

Upstream: Principalmente proveedores de componentes de productos y equipos de refrigeración líquida, como conectores rápidos, CDU, válvulas solenoides, tanques de refrigeración líquida por inmersión, colectores y refrigerantes.

 

Centro de la corriente:Principalmente fabricantes de servidores y chips refrigerados por líquido, así como instalaciones integradas, módulos y gabinetes de refrigeración líquida.

 

Río abajo:Incluye los tres principales operadores de telecomunicaciones, empresas de Internet como Baidu, Alibaba, Tencent y JD, así como clientes de la industria de la información para aplicaciones de telecomunicaciones, Internet, gobierno, finanzas, transporte y energía.

 

Liquid cooling server industry chain combing

▲ Combinación de cadenas industriales de servidores de refrigeración líquida

 

 

II Conceptos Básicos de Refrigeración Líquida

 

1. Clasificación de la tecnología de refrigeración líquida

La refrigeración líquida utiliza líquido como refrigerante y lo hace circular para transferir calor desde los componentes internos de los equipos de TI en los centros de datos al exterior, garantizando un funcionamiento seguro.

 

Ventajas de la refrigeración líquida:Ofrece eficiencia y densidad de calor ultraaltas, disipa el calor de manera eficiente y no se ve afectado por la altitud, la geografía o la temperatura.

 

Actualmente, existen tres tipos principales de tecnología de refrigeración líquida: refrigeración líquida por placa fría, refrigeración por pulverización y refrigeración líquida por inmersión.

 

Classification of Liquid Cooling Technologies

▲ Clasificación de tecnologías de refrigeración líquida.

 

2. Comparación de tres tecnologías de refrigeración líquida: refrigeración líquida con placa fría

La refrigeración líquida de placa fría utiliza una cavidad cerrada hecha de metales térmicamente conductores (como cobre o aluminio) para transferir calor indirectamente desde los componentes que generan calor al refrigerante líquido que circula en un circuito cerrado. El sistema normalmente consta de una torre de enfriamiento, una CDU, tuberías de enfriamiento líquido primario y secundario, refrigerante y gabinetes enfriados por líquido. Los gabinetes enfriados por líquido contienen componentes como placas frías, tuberías internas, conectores de fluido y colectores.

 

La refrigeración líquida con placa fría, como método de refrigeración líquida sin contacto, cuenta con más de 10 años de investigación y es la tecnología más madura entre las tres principales soluciones de refrigeración líquida. Es una aplicación eficaz para implementar equipos de alta potencia, mejorar la eficiencia energética, reducir los costos operativos de refrigeración y reducir el costo total de propiedad (TCO). Sin embargo, dado que no logra el 100% de refrigeración líquida, es menos eficiente cuando el consumo de energía del gabinete es bajo o la proporción de refrigeración líquida es mínima. Además, el diseño de placas frías debe considerar los diseños de los componentes existentes, lo que hace que el diseño estructural y la implementación sean más complejos y que la estandarización sea más difícil de promover.

 

Principle Diagram of Cold Plate Liquid Cooling System

▲ Diagrama principal del sistema de refrigeración líquida de placa fría

 

3. Comparación de tres tecnologías de refrigeración líquida: refrigeración líquida por inmersión

La refrigeración líquida por inmersión implica sumergir completamente los componentes que generan calor en un refrigerante, lo que permite el contacto directo entre los componentes y el refrigerante para el intercambio de calor. Los componentes exteriores del sistema incluyen una torre de enfriamiento, una tubería primaria y un refrigerante primario, mientras que los componentes interiores incluyen una CDU, una cámara de inmersión, equipo de TI, una tubería secundaria y un refrigerante secundario. Dado que los equipos de TI están completamente sumergidos en el refrigerante secundario, se deben utilizar líquidos no conductores como aceite mineral, aceite de silicona o líquidos fluorados.

 

Según si hay un cambio de fase durante el intercambio de calor, la refrigeración líquida por inmersión se puede dividir en dos tipos:

 

1) Refrigeración por inmersión monofásica:El refrigerante secundario sólo sufre un cambio de temperatura durante la transferencia de calor, sin cambio de fase, y el calor se transfiere íntegramente a través de calor sensible.

2) Enfriamiento por inmersión bifásico:El refrigerante secundario sufre un cambio de fase durante la transferencia de calor, utilizando calor latente para transferir el calor.

 

En comparación con la refrigeración por aire tradicional y la refrigeración líquida con placa fría, la refrigeración líquida por inmersión ofrece ventajas como ahorro de energía (PUE < 1,13), compacidad, alta confiabilidad y bajo nivel de ruido. Sin embargo, también enfrenta desafíos como limitaciones en la selección de componentes, restricciones de mantenimiento y requisitos específicos del entorno de la sala.

 

 Two-phase immersion cooling

▲ Enfriamiento por inmersión de dos fases

 

4. Comparación de tres tecnologías de refrigeración líquida: refrigeración por aspersión

El enfriamiento por pulverización es un método de contacto directo en el que el refrigerante se rocía con precisión sobre los componentes a nivel de chip a través de la gravedad o la presión del sistema, enfriando los componentes que generan calor o los elementos térmicamente conductores conectados a ellos. El sistema normalmente consta de una torre de enfriamiento, una CDU, tuberías de enfriamiento líquido primario y secundario, refrigerante y gabinetes enfriados por aspersión. Los gabinetes enfriados por aspersión generalmente contienen un sistema de tuberías, un sistema de distribución de líquido, módulos de aspersión y un sistema de retorno.

 

El enfriamiento por pulverización también logra un enfriamiento 100% líquido y su estructura es más innovadora que el enfriamiento por inmersión. Sin embargo, su rendimiento de ahorro de energía es inferior al de la refrigeración líquida por inmersión y comparte limitaciones similares con la refrigeración por inmersión.

 

Spray cooling

▲ Enfriamiento por aspersión

 

5. Comparación de tres tecnologías de refrigeración líquida

 

Comparison of Data Center Liquid Cooling Methods

▲ Comparación de métodos de refrigeración líquida de centros de datos

 

 

III Impulsores del desarrollo de la industria de refrigeración líquida

 

1. El aumento del volumen de datos está impulsando la mejora continua de la potencia informática

El volumen de datos global y la potencia informática están creciendo rápidamente. Según datos de IDC, la esfera de datos global alcanzó los 103,66 ZB en 2022, mientras que el volumen de datos de China crecerá de 23,88 ZB en 2022 a 76,6 ZB en 2027, con una tasa compuesta anual del 26,3 %, lo que potencialmente la ubicará como la tasa de crecimiento más rápida del mundo. IDC predice que durante los próximos tres años, los datos globales recién generados superarán el total de datos creados en los últimos 30 años, lo que conducirá a un crecimiento exponencial en la potencia informática necesaria para el almacenamiento, la transmisión y el procesamiento de datos.

 

La actualización inteligente de la potencia informática se está convirtiendo en una tendencia, y la informática inteligente impulsa la mayor parte del crecimiento. La demanda de procesar grandes volúmenes de datos complejos está impulsando la necesidad de recursos informáticos más potentes y eficientes para respaldar el desarrollo de aplicaciones de inteligencia artificial. Como resultado, la infraestructura computacional se está construyendo a un ritmo más rápido, convirtiéndose en la "base" para apoyar el desarrollo de la economía digital. La demanda de capacidades de datos y potencia informática se refuerzan mutuamente. IDC predice que la potencia informática inteligente de China seguirá creciendo rápidamente, alcanzando 1.117,4 EFLOPS en 2027, con una tasa compuesta anual del 33,9% entre 2022 y 2027.

 

Global Data Volume Scale and Forecast

▲ Escala y pronóstico del volumen de datos globales

 

2. El salto adelante de AIGC está impulsando un aumento en la demanda de energía informática

Con la continua evolución de modelos y algoritmos, la escala y la complejidad de los parámetros han aumentado significativamente, lo que genera mayores requisitos de potencia informática. La aparición de grandes modelos generativos, representados por ChatGPT y GPT-4, ha impulsado un rápido desarrollo en el campo AIGC, impulsando aún más el aumento de la demanda de potencia informática.

 

Lado del entrenamiento: el modelo GPT-3 contiene alrededor de 174,6 mil millones de parámetros, y entrenarlo una vez requiere aproximadamente 3640 días de PF (ejecutándose durante 3640 días a 10 petaflops por segundo). La cantidad de parámetros en GPT-4 podría aumentar a 1,8 billones, y la demanda de capacitación aumentaría a 68 veces la de GPT-3, lo que requeriría 90-100 días de capacitación en 25,{{16} } GPU A100.

Lado de inferencia: para GPT-3, según estimaciones de Tianyi Think Tank, la demanda computacional para generar 500 tokens (aproximadamente 350 palabras) alcanza 1,75 PFLOPS.

 

 Evolution of Large Model Parameters (2018-2023)

▲ Evolución de los parámetros del modelo grande (2018-2023)


3. El mercado de centros de datos continúa expandiéndose

Como parte importante de la nueva infraestructura, en los últimos años, con el rápido desarrollo de la cadena industrial de aplicaciones de datos e inteligencia artificial, la construcción de centros de datos en China se ha acelerado y el número de bastidores de centros de datos ha aumentado constantemente. Basado en un rack estándar de 2,5 kW, el número de racks de centros de datos en uso en China alcanzó los 5,2 millones en 2021. Entre ellos, el número de racks a gran escala creció aún más rápido, alcanzando los 4,2 millones, lo que representa el 80 %. A finales de 2022, el número total de racks de centros de datos en China se acercaba a los 6 millones, ubicándose entre los primeros a nivel mundial. Se espera que para 2023, el número de racks de centros de datos en China alcance los 7,76 millones, y que el tamaño del mercado de centros de datos alcance los 247 mil millones de RMB.

 

Prediction Trend ofTotal Number of Data Center Racks in China(2017-2023) (Unit. 10,000 Racks)

▲ Tendencia de predicción del número total de bastidores de centros de datos en China (2017-2023) (Unidad 10, 000 bastidores)

 

4. Los problemas de consumo de energía y disipación de calor en los centros de datos son cada vez más destacados

Con el creciente número de centros de datos, su consumo de electricidad también se ha disparado. Según estadísticas relevantes, en 2021, los centros de datos de China consumieron 216,6 mil millones de kWh y se espera que superen los 380 mil millones de kWh para 2030. Al mismo tiempo, la escala de rápido crecimiento de los centros de datos está exacerbando los desafíos de disipación de calor:

 

Nivel general:Los centros de datos tradicionales tienen enormes costos de energía, y una alta proporción del consumo de energía se atribuye a la refrigeración. Los centros de datos llevan mucho tiempo consumiendo mucha energía, y el consumo eléctrico nacional de los centros de datos representa aproximadamente el 2%-3% del consumo total de electricidad. Para 2030, se espera que el consumo de electricidad de los centros de datos supere los 380 mil millones de kWh y las emisiones de carbono superen los 200 millones de toneladas. Al mismo tiempo, los centros de datos tradicionales incurren en importantes costes de refrigeración. Según el "Informe de la encuesta sobre centros de datos globales 2022 del Uptime Institute", la eficacia del uso de energía (PUE) anual promedio de las muestras de centros de datos globales en 2022 fue de 1,55 y, desde 2014, el PUE anual promedio se ha mantenido entre 1.{{12} }.65, lo que indica que el consumo de energía relacionado con la refrigeración representa el 35%-39%.

 

Micronivel:La creciente densidad informática enfrenta desafíos de refrigeración. La mejora en el rendimiento informático aumenta el consumo de energía y la densidad térmica del servidor, y la refrigeración por aire tradicional ya no puede satisfacer las necesidades de disipación de calor de los dispositivos electrónicos de alta densidad térmica. A medida que la Ley de Moore se desvanece, la gente mejora continuamente el índice de eficiencia energética de chips y sistemas a través de tecnologías como la computación heterogénea, pero esto también ha llevado a un rápido aumento en el consumo de energía de los chips individuales. Actualmente, los chips de procesador convencionales tienen un consumo de energía de aproximadamente 200 W, y algunas CPU recientemente lanzadas superan los 350 W, y los chips de aceleración heterogéneos como las GPGPU incluso han superado los 700 W. En este contexto, la refrigeración por aire tradicional ya no es suficiente para satisfacer las necesidades de refrigeración, y los centros de datos y servidores requieren tecnologías de refrigeración más eficientes para abordar los problemas de disipación de calor de alta potencia, alta densidad térmica y alta densidad informática. chips y sistemas.

 

Micronivel:Las altas temperaturas afectan negativamente a los componentes electrónicos. En entornos de alta temperatura, los materiales de las máquinas, el aislamiento de los cables y los sellos impermeables son más propensos a envejecer, lo que genera riesgos para la seguridad. Más de la mitad de las averías de los componentes electrónicos se deben a las altas temperaturas. Cuando la temperatura de los componentes semiconductores aumenta 10 grados, la corriente de fuga inversa se duplica, lo que aumenta el riesgo de incendio y aumenta la probabilidad de incidentes de seguridad, lo que podría provocar la parálisis del centro de datos.

 

5. El rápido aumento de la densidad de energía de un solo bastidor exige una revolución de refrigeración en los centros de datos

Limitado por el área de construcción del centro de datos y las regulaciones ambientales, el aumento de la densidad de potencia de un solo rack se ha convertido en una solución clave para conciliar la creciente demanda de potencia informática con la capacidad limitada de los centros de datos. Según datos publicados por Colocation America, en 2020, la potencia promedio mundial de un solo rack de los centros de datos alcanzó los 16,5 kW, un aumento del 175 % en comparación con 2008. Según CCID Consulting, con el rápido aumento de la potencia informática de los centros de datos, la alta Los bastidores individuales eléctricos se generalizarán. Se espera que para 2025, la potencia promedio mundial de un solo rack de los centros de datos alcance los 25 kW.

 

La tecnología de refrigeración líquida, con su efecto de refrigeración altamente eficiente, puede mejorar significativamente la eficiencia y la estabilidad de los servidores, al tiempo que permite organizar más servidores en un espacio determinado del centro de datos, mejorando así la eficiencia operativa del centro de datos.

 

Correspondence Between Rack Density and Cooling Methods

▲ Correspondencia entre la densidad de la rejilla y los métodos de enfriamiento

 

 

IV Perspectivas y aplicaciones del mercado de refrigeración líquida

 

1. Se espera que el mercado de servidores de refrigeración líquida de China alcance los 8.900 millones de dólares en 2027

A medida que el desarrollo ecológico de los centros de datos se convierte en una tendencia y la competencia en el campo de la inteligencia artificial se intensifica, lo que lleva a un salto en la demanda de potencia informática de alto rendimiento, el mercado de servidores de refrigeración líquida en China ha experimentado un crecimiento explosivo en los últimos años.

 

Según datos de IDC, la escala del mercado de servidores de refrigeración líquida de China alcanzó los 1.010 millones de dólares en 2022, un crecimiento interanual del 189,9%. En 2023, se espera que el mercado mantenga un rápido crecimiento, y se prevé que el tamaño del mercado alcance los 1,51 mil millones de dólares. Para 2027, se espera que el tamaño del mercado de servidores de refrigeración líquida de China alcance los 8.900 millones de dólares.

 

Market Size and Forecast of Liquid Cooling Servers in China (Unit: 100 Million USD)

▲ Tamaño del mercado y pronóstico de servidores de refrigeración líquida en China (Unidad: 100 millones de dólares)

 

2. Estructura de aplicación industrial de los centros de datos de refrigeración líquida en China

En combinación con la refrigeración por aire, los centros de datos con refrigeración líquida potencian el desarrollo de diversas industrias. En el futuro, el mercado de refrigeración de centros de datos verá un patrón de desarrollo colaborativo de "refrigeración por aire + refrigeración líquida". La tecnología de refrigeración por aire no será reemplazada completamente por la refrigeración líquida, sino que se seleccionará según las diferentes necesidades de los clientes, con diferentes soluciones de refrigeración para los centros de datos.

 

En 2019, los centros de datos con refrigeración líquida se utilizaban principalmente en aplicaciones representadas por la supercomputación. A medida que los volúmenes de negocios de las industrias de Internet, finanzas y telecomunicaciones crezcan rápidamente, la demanda de refrigeración líquida en los centros de datos de estas industrias seguirá aumentando. Se espera que para el 2025, los centros de datos con refrigeración líquida representen el 24,0% de la industria de Internet, el 25,0% de la industria financiera y el 23,0% de la industria de las telecomunicaciones. Mientras tanto, industrias como la energía, la biotecnología, la atención médica y el gobierno verán una aceleración en la integración de los centros de datos con refrigeración líquida en el nuevo ecosistema de centros de datos de uso general, con una ligera disminución en la escala general. Se espera que para 2025, los centros de datos de refrigeración líquida representen el 10,5% de la industria energética, el 8,5% de la industria biotecnológica, el 6,5% de la industria sanitaria y otras empresas como el gobierno caigan al 2,5%.

 

Industry Application Structure and Forecast for Liquid Cooling Data Centers in China (2019-2025)

▲ Estructura de aplicación industrial y pronóstico para centros de datos de refrigeración líquida en China (2019-2025)

 

3. Panorama competitivo del mercado de servidores de refrigeración líquida de China: Sugon lidera, seguido de Huawei, Alibaba y otros

Los fabricantes nacionales, encabezados por Sugon, han acumulado una experiencia comercial sustancial y, según los ingresos de los productos, la participación de mercado, los comentarios de los clientes y otros indicadores, Sugon es un líder clave del mercado, seguido de cerca por Huawei, Alibaba y Lenovo. IBM China se posiciona como un potencial rival.

 

La industria de servidores de refrigeración líquida en China tiene altas barreras técnicas y los pioneros tienen una ventaja. Actualmente, los principales fabricantes nacionales todavía se encuentran en las etapas experimentales o de aplicación inicial de la tecnología de refrigeración líquida y el panorama competitivo aún no se ha definido claramente. Además, debido a preocupaciones sobre la seguridad de los datos, existen ciertas barreras geográficas para el suministro de infraestructura de centros de datos en China, lo que dificulta que los fabricantes extranjeros ingresen al mercado chino.

 

Competitiveness Matrix of Liquid Cooling Data Center Vendors in China (2020)

▲ Matriz de competitividad de los proveedores de centros de datos de refrigeración líquida en China (2020)

 

4.Operadores de TelecomunicacionesProponerUna visión de tres años para la refrigeración líquida en centros de datos

Como líderes de la industria en el sector de los centros de datos, los tres principales operadores de telecomunicaciones están a la vanguardia de la exploración y aplicación de la tecnología de refrigeración líquida. En junio de 2023, los tres principales operadores publicaron conjuntamente el "Libro blanco sobre tecnología de refrigeración líquida para operadores de telecomunicaciones (2023)" y describieron una visión de tres años y una hoja de ruta para aplicaciones de refrigeración líquida.

 

El objetivo general de la visión de tres años es reunir las fuerzas de la industria, abordar desafíos, construir un ecosistema y ampliar las aplicaciones uniendo los sectores upstream y downstream de la industria, la academia y la investigación. La atención se centrará en atacar tecnologías centrales clave con originalidad y liderazgo, y en construir completamente un ecosistema de refrigeración líquida de alto nivel. El objetivo es establecer un ecosistema abierto, promover el desacoplamiento de los gabinetes y servidores de refrigeración líquida y liderar la formación de estándares unificados que reduzcan la PUE (efectividad en el uso de energía) y al mismo tiempo logren el TCO (costo total de propiedad) más bajo. Aprovechando las ventajas de escala, su objetivo es ampliar significativamente las aplicaciones.

 

En cuanto al cronograma de implementación, los tres principales operadores han presentado planes detallados para 2023-2025.

 

  • 2023:Realizar verificaciones técnicas, probar exhaustivamente el rendimiento de la refrigeración líquida, reducir el PUE y preparar las capacidades técnicas de planificación, construcción y mantenimiento;
  • 2024: Realizar pruebas a gran escala, promover el desacoplamiento de gabinetes y servidores de refrigeración líquida, fomentar la competencia, madurar el ecosistema industrial y reducir los costos totales del ciclo de vida;
  • Para 2025:Lograr una aplicación a gran escala, utilizando tecnología de refrigeración líquida en más del 50% de los proyectos, y promover conjuntamente la formación de un ecosistema de refrigeración líquida unificado, estandarizado, rentable y ampliamente aplicado. La industria de las telecomunicaciones aspira a convertirse en líder en tecnología de refrigeración líquida, líder en la cadena industrial y líder en la promoción de aplicaciones.

 

Three-Year Vision for Liquid Cooling by Telecom Operators

▲ Visión de tres años para la refrigeración líquida por parte de los operadores de telecomunicaciones

 

 

V Conclusión

 

Gran potencial de desarrollo en la industria de la refrigeración líquida, junto con desafíos y oportunidades

Actualmente, la industria de refrigeración líquida de China se encuentra en sus primeras etapas y la tasa de penetración de las aplicaciones de refrigeración líquida sigue siendo relativamente baja. Sin embargo, como tecnología de refrigeración de próxima generación para centros de datos y grupos de servidores, el potencial de mercado y las perspectivas futuras de la refrigeración líquida han atraído una atención considerable, y se espera que la penetración de las aplicaciones aumente rápidamente.

 

Sin embargo, la industria de la refrigeración líquida en China todavía enfrenta varios desafíos de desarrollo:

 

1. Ecosistema industrial inmaduro

Aunque la tecnología de refrigeración líquida se ha estado desarrollando durante más de una década tanto a nivel nacional como internacional, el ecosistema sigue incompleto. Los productos varían ampliamente y falta estandarización. Actualmente, no existe un estándar de interfaz unificado para servidores y gabinetes en la industria. Los gabinetes y servidores están estrechamente acoplados y los formatos de productos de diferentes fabricantes, como servidores, refrigerantes, tuberías de refrigeración y sistemas de suministro de energía, difieren, lo que hace que las interfaces de los productos sean incompatibles entre sí. Esto limita la competencia y obstaculiza el desarrollo de una industria de alta calidad.

 

2. Arquitectura del sistema de refrigeración líquida en evolución

Las arquitecturas de los sistemas de refrigeración líquida en la industria difieren, con variaciones entre las configuraciones de suministro de energía y refrigeración distribuida y centralizada. Los servidores de algunos fabricantes han evolucionado hacia servidores de alta temperatura, que permiten la reducción de unidades enfriadoras de agua, simplificando aún más la arquitectura de la fuente de enfriamiento y promoviendo la reducción de costos y la eficiencia.

 

3. Altos costos de los sistemas de refrigeración líquida

En comparación con los productos tradicionales de refrigeración por aire, la refrigeración líquida todavía presenta desafíos en términos de alta inversión inicial y costos totales del ciclo de vida. Este problema podría afectar la adopción y promoción a gran escala de productos de refrigeración líquida en las primeras etapas.

 

 

 

Envíeconsulta