Search

How to Size and Integrate Modular Data Center Liquid Cooling for 100–150 kW AI Racks – Português

modular data center liquid cooling

Para um rack de IA de 100–150 kW, o resfriamento líquido modular de data center não é mais uma melhoria de eficiência, mas um requisito de capacidade. Acima de aproximadamente 50 kW por rack, o ar não consegue remover calor suficiente, e um rack atual NVIDIA GB200 NVL72 consome 120–132 kW com resfriamento líquido integrado por projeto. A única decisão que determina o sucesso é combinar a unidade de distribuição de refrigerante, o encanamento de dois loops e o tratamento residual de ar como um sistema único de engenharia, em vez de comprar uma CDU apenas pela potência nominal em quilowatts.

O que o resfriamento líquido modular de data center significa para um rack de 100 kW?

Uma construção de resfriamento líquido modular de data center usa gabinetes ou skids pré-fabricados em fábrica, nos quais a planta de resfriamento é integrada antes da entrega. A Universidade de Göttingen adotou esse caminho para seu supercomputador Emmy: a STULZ entregou uma instalação modular de quatro salas em menos de dois meses, abrigando 1.5 MW de computação a aproximadamente 100 kW por rack. O projeto capturou 78 por cento do calor através de líquido e 22 por cento através de ar.

Essa implantação demonstra a arquitetura central. As cold plates são montadas diretamente em GPUs, CPUs e chips de switch. Um loop de resfriamento tecnológico tratado conduz o calor até uma CDU. Dentro da CDU, um trocador de calor transfere essa energia para um loop separado de água da instalação, que a dissipa por meio de dry coolers, uma torre ou um chiller. Os dois loops nunca se misturam, e esse isolamento é o ponto central de todo o design.

O resfriamento líquido modular de data center entrou na corrente principal em 2025. A Data Center Dynamics relatou que o Google habilitou ou implantou resfriamento líquido em cerca de metade de sua pegada global, aproximadamente 1 GW em 2,000 pods de TPU, enquanto alcançava 99.999 por cento de uptime. A pesquisa de resfriamento de 2025 do Uptime Institute constatou que cerca de um em cada cinco operadores já usava resfriamento líquido direto, com a maioria dos outros avaliando essa tecnologia.

Quanto de um rack de 120 kW realmente entra no loop de líquido?

As cold plates não capturam todos os watts. Para os nós de GPU atuais, os fornecedores colocam a captura de líquido entre 60 e 90 por cento, sendo 75 a 85 por cento a faixa realista de planejamento. A Vertiv cita 70 a 75 por cento para o líquido. O restante sai pelas fontes de alimentação, memória, NICs e unidades de disco para o ar da sala.

Aplique isso a um rack de ponta. A NVIDIA especifica o GB200 NVL72 em cerca de 120 a 132 kW, com seu loop de referência operando com fornecimento de 25 °C e retorno de 45 °C. Mesmo no topo da faixa de captura, mais de 25 kW ainda entram na sala. Um design de resfriamento líquido modular de data center que omite essa carga do lado do ar superaquecerá o salão mesmo quando o loop do chip estiver saudável.

A aritmética do fluxo é igualmente fixa. Com um aumento de temperatura de 10 K, um rack de líquido precisa de aproximadamente 1.5 litros por minuto por quilowatt. Portanto, um rack de 100 kW precisa de cerca de 150 L/min, e o valor publicado pela NVIDIA para o NVL72 é de aproximadamente 2 litros por segundo. O diâmetro dos canos, a altura manométrica da bomba e o dimensionamento dos manifolds para o resfriamento líquido modular de data center derivam desses números, não de uma classificação genérica de catálogo.

Como dimensionar uma CDU sem subdimensionar o loop?

O subdimensionamento é o erro de implantação mais comum e produz um sintoma óbvio: a temperatura do refrigerante sobe, as GPUs são limitadas e o rendimento de treinamento cai. A CDU deve suportar o pico de carga térmica do lado líquido, não a potência nominal total do rack. O cálculo é a potência total do rack multiplicada pela taxa esperada de captura de líquido.

Esta é a linha de base do lado líquido que toda fileira de resfriamento líquido modular de data center deve atender. Uma fileira de dez racks a 100 kW cada um com fator de captura de 0.75 resulta em 10 × 100 × 0.75, ou 750 kW. Clusters de produção acima de 500 kW exigem capacidade N+1 de CDU com manifolds interconectados, porque uma falha de CDU pode tirar uma fileira do ar em 60 a 120 segundos. Ambas as unidades devem alimentar ambas as metades da fileira por meio de conexões com válvulas.

resfriamento líquido modular de data center

A capacidade é apenas uma variável em uma planta de resfriamento líquido modular de data center. A CDU também deve ser especificada para vazão, queda de pressão em manifolds longos, filtragem e temperatura de aproximação. A aproximação é a diferença entre a água fria da instalação e o fornecimento secundário quente; uma CDU não pode fornecer refrigerante mais frio do que a água da instalação mais essa diferença. Selecionar uma unidade de resfriamento líquido modular de data center apenas em quilowatts é o motivo pelo qual algumas construções funcionam no inverno e são limitadas no verão.

A capacidade das CDUs cresceu acentuadamente em 2025 com o aumento da potência dos racks. A Data Center Dynamics registrou que unidades de 2 MW se tornaram normais, com a Schneider Electric e a Motivair anunciando uma CDU de 2.5 MW e a Flex e a JetCool demonstrando uma solução modular ampliável até 1.8 MW. Essas unidades maiores permitem que uma planta modular pré-fabricada de resfriamento líquido de data center atenda às fileiras de classe de megawatt que a IA agora exige.

Qual classe de água ASHRAE o loop da instalação deve ter como alvo?

A seleção da temperatura da água é a decisão que molda toda a planta de resfriamento líquido modular de data center. A ASHRAE define as classes de água da instalação pela temperatura máxima de fornecimento, de W17 a W45 e W+ acima de 45 °C. As classes mais baixas implicam chillers mecânicos. W27 é adequada para implantações padrão direto-ao-chip, W32 se encaixa em cold plates de IA otimizadas em torres ou dry coolers, e W40 e acima podem operar quase o ano todo com resfriamento seco em climas temperados.

A maioria dos sistemas atuais aceita W32 a W45. O objetivo contraintuitivo é manter o loop tão quente quanto as cold plates permitem. Um fornecimento de 35 °C ainda pode manter o silício abaixo do seu limite de junção, permitindo que o calor seja dissipado por dry coolers no telhado, contornando o chiller na maioria das horas de operação. É aqui que o resfriamento líquido modular de data center conquista sua vantagem energética, ao eliminar a maior carga não relacionada a TI.

A temperatura da água da instalação em qualquer projeto de resfriamento líquido modular de data center deve ser escolhida cedo e em conjunto com o fornecedor de TI. Ela decide se o telhado terá chillers ou dry coolers, o tamanho da tubulação e o balanço energético do edifício. Ela também decide a reutilização de calor: W45 e acima é a faixa onde o calor residual se torna genuinamente útil para uma rede distrital, em vez de uma alegação de marketing.

O clima altera a margem de dimensionamento. Um dry cooler deve ser especificado para o ambiente de pico, não para a média anual. Quando o calor do verão eleva a água da instalação, o loop secundário sobe junto e as GPUs são limitadas. A capacidade de rejeição de calor dimensionada para condições de pico separa um sistema que funciona o ano todo de um que funciona apenas de outubro a março.

Por que a carga residual do lado do ar é a falha de design mais comum?

Todo salão de resfriamento líquido modular de data center é um salão híbrido. A Schneider Electric enfatizou que o design previsível sempre combina componentes de ar e líquido, porque memória, unidades de disco, fontes de alimentação e switches de rede ainda dissipam calor para a sala. A construção de Göttingen reservou um segundo módulo resfriado a ar especificamente para equipamentos de rede e armazenamento.

A falha prática é planejar o líquido enquanto se ignora os 15 a 25 kW de calor ambiente por rack. Trocadores de calor de porta traseira no mesmo loop secundário são uma resposta comum, capturando o ar residual do chassi antes que ele entre no salão. A capacidade da porta varia fortemente com a temperatura da água, e a água de fornecimento deve permanecer acima do ponto de orvalho para evitar condensação.

A segregação de cargas de trabalho é importante em um loop compartilhado. Operar racks de GPU de 1,000 W e armazenamento de baixa densidade no mesmo circuito secundário força um compromisso de temperatura que desperdiça a margem de free-cooling. Um layout disciplinado de resfriamento líquido modular de data center agrupa os racks por classe térmica e dá a cada classe um loop ajustado às suas necessidades.

O que o comissionamento de uma planta de resfriamento líquido modular de data center exige?

A maioria das falhas no primeiro ano no resfriamento líquido modular de data center são falhas de loop, não falhas de silício. Teste a pressão de todo o loop secundário a 1.5 vezes a pressão de trabalho por pelo menos 24 horas antes da chegada de qualquer equipamento de TI. Retire uma amostra de refrigerante, realize um painel de química e confirme a filtragem antes que o fluxo comece. Um P&ID completo, lista de válvulas e procedimento de isolamento devem ser entregues à equipe de operações interna.

resfriamento líquido modular de data center

A química do refrigerante é um item permanente de manutenção no resfriamento líquido modular de data center. Um loop secundário de água-glicol visa pH de 8.0 a 9.5 e condutividade abaixo de 50 microsiemens por centímetro, enquanto loops desionizados são mantidos muito mais baixos, frequentemente abaixo de 5 a 10. Fluido fora da especificação corrói as cold plates, prolifera biofilme e gradualmente entope os microcanais que fazem o resfriamento direto-ao-chip funcionar. Testes mensais e reabastecimentos trimestrais são padrão.

A defesa contra vazamentos é construída, não assumida. Instale cabos de detecção sob cada rack e manifold, ao redor de cada CDU e abaixo de qualquer piso elevado, com desligamento automático da bomba ao detectar vazamento. Os acoplamentos rápidos blind-mate são o ponto de falha de serviço mais provável, e o incidente mais comum no primeiro ano é uma válvula de drenagem do manifold deixada mal posicionada após o comissionamento. A confirmação positiva do alinhamento de válvulas evita isso.

A entrada de ar é a falha mais silenciosa. Qualquer ar no loop secundário reduz drasticamente a transferência de calor local das cold plates e convida à cavitação da bomba. Separadores automáticos de ar na CDU, procedimentos de enchimento lento e ventilação em pontos altos mantêm o loop cheio. Essas etapas de comissionamento são onde você conquista a confiabilidade que torna um cluster denso seguro de operar.

Quais riscos estruturais e de redundância os operadores ignoram?

Um rack refrigerado a líquido totalmente carregado com uma CDU interna pode pesar 1,400 a 1,800 kg. A JLL estima a carga de piso para equipamentos líquidos de alta densidade em 20 kPa ou mais, contra os 12 a 15 kPa para os quais os salões convencionais foram projetados. Em um retrofit, isso pode decidir o projeto, e a carga da laje deve ser verificada no momento do design, não depois que os racks chegam.

Os retrofits de resfriamento líquido modular de data center também enfrentam uma lacuna de rejeição de calor. Uma instalação que passa de racks resfriados a ar de 8 kW para racks resfriados a líquido de 80 kW pode precisar de três a cinco vezes a capacidade da planta de resfriamento, geralmente o maior item de capital do projeto. Uma implantação de 1 MW normalmente exige tubos principais de fornecimento e retorno de seis polegadas roteados até cada CDU, infraestrutura que simplesmente não existe em um salão resfriado a ar.

A redundância segue o novo caminho crítico no resfriamento líquido modular de data center. Bombas e CDUs precisam do mesmo tratamento N+1 que os ventiladores que substituem, com válvulas de isolamento que permitem manutenção sem drenar uma fileira. À medida que a potência dos racks aumenta em direção aos valores de 600 kW agora nos roadmaps dos fornecedores, essas restrições estruturais, elétricas e hidráulicas se apertam juntas, e não separadamente.

Checklist final antes de implantar

Um projeto de resfriamento líquido modular de data center passa ou falha na integração. Confirme o modelo exato do rack e a potência de pico, multiplique por um fator realista de captura de 0.75 a 0.85 para dimensionar a CDU e adicione unidades N+1 com manifolds interconectados. Escolha a classe de água ASHRAE antes que o edifício seja projetado, dimensione os dry coolers para o ambiente de pico e projete o calor residual do lado do ar que cada rack ainda produz.

Em seguida, verifique os itens sem glamour: carga de piso, diâmetros de tubos, química do refrigerante, detecção de vazamentos e um teste de pressão de 24 horas. Feitos juntos, esses passos de resfriamento líquido modular de data center entregam o que Göttingen mostrou ser possível: capacidade densa de IA implantada em semanas em vez de meses, com PUE anual próximo de 1.1 em vez da média de resfriamento a ar de 1.5 ou mais.

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注