Будем честны: воздушное охлаждение достигло своего предела. Если вы эксплуатируете серверы высокой плотности или AI-кластеры, вы уже знаете об этом. Именно поэтому дата-центры по всему миру переходят на решение с жидкостным охлаждением — лучшая термическая эффективность, более низкий PUE и гораздо более быстрый путь к снижению совокупной стоимости владения (TCO).
Воздушное охлаждение было стандартом на протяжении десятилетий, но оно больше не является устойчивым. Обычные кондиционеры (CRAC/CRAH) с трудом справляются со стойками, превышающими 15–20 кВт на стойку. Высокопроизводительные CPU и GPU теперь генерируют 300–700 Вт на чип, а такие AI-ускорители, как NVIDIA H100 или AMD Instinct, могут превышать 700 Вт. Низкая удельная теплоёмкость и плохая теплопроводность воздуха требуют огромного воздушного потока, что приводит к громким вентиляторам, высоким паразитным энергозатратам и ограниченной холодопроизводительности.
Напротив, решение с жидкостным охлаждением использует воду или диэлектрические жидкости, которые на порядки эффективнее передают тепло. Жидкость обладает теплопроводностью в 30–50 раз выше, чем воздух, и примерно в 4 раза большей удельной теплоёмкостью. Это фундаментальное преимущество делает жидкостное охлаждение единственным жизнеспособным путём вперёд для дата-центров высокой плотности.
Ключевые преимущества решения с жидкостным охлаждением
Значительно более низкая эффективность использования энергии (PUE)
Наиболее убедительный показатель для любого дата-центра — это PUE. Традиционные объекты с воздушным охлаждением обычно достигают PUE 1,5–1,8, что означает, что на охлаждение тратится на 50–80% больше энергии. Хорошо спроектированное решение с жидкостным охлаждением может достичь PUE всего 1,04–1,1, приближаясь к теоретическому единичному значению. Прямое охлаждение чипов (cold plate) и иммерсионное охлаждение устраняют большинство вентиляторов и снижают нагрузку на чиллеры, сокращая энергозатраты на охлаждение на 50–80%.
Поддержка экстремальной плотности мощности
В то время как управление воздушным потоком ограничивается примерно 30 кВт на стойку, решение с жидкостным охлаждением легко поддерживает 50 кВт, 100 кВт и даже 200 кВт на стойку. Эта возможность критически важна для кластеров обучения AI, HPC-моделирования и крупномасштабных облачных вычислений. Гиперскейлеры, такие как Google, Microsoft и Meta, уже внедряют стойки с жидкостным охлаждением, чтобы разместить больше вычислительной мощности на квадратный фут, сокращая общую площадь объекта и затраты на инфраструктуру.
Обеспечение бесплатного охлаждения и повторного использования тепла
Системы жидкостного охлаждения работают при более высоких температурах теплоносителя (40–65 °C), в отличие от воздушного охлаждения, требующего охлаждённого воздуха (~22 °C). Это позволяет решению с жидкостным охлаждением использовать бесплатное охлаждение с помощью сухих градирен или градирен охлаждения большую часть года. Более того, отработанное тепло можно повторно использовать для отопления зданий, теплиц или сетей централизованного теплоснабжения — превращая центр затрат в источник дохода.
Снижение шума вентиляторов, затрат на обслуживание и уровня отказов серверов
Воздушное охлаждение требует высокоскоростных вентиляторов внутри серверов, которые потребляют энергию, создают шум (часто >85 дБА) и накапливают пыль. Вентиляторы относятся к числу наиболее подверженных отказам компонентов сервера. Решение с жидкостным охлаждением устраняет большинство вентиляторов из самого сервера (кроме памяти/VRM в некоторых конструкциях), обеспечивая более тихую работу, меньшую вибрацию и более высокую надёжность. Исследования показывают, что серверы с жидкостным охлаждением имеют на 25–40% более низкий годовой уровень отказов по сравнению с серверами только с воздушным охлаждением.
Типы решений с жидкостным охлаждением для дата-центров
Прямое жидкостное охлаждение чипов (Cold Plate)
Холодная пластина (cold plate) крепится непосредственно к CPU, GPU или памяти, а жидкость циркулирует через пластину. Это решение с жидкостным охлаждением замкнутого контура сохраняет воздушное охлаждение для других компонентов (хранилище, сеть). Это наиболее распространённый вариант модернизации для существующих дата-центров.
Однофазное иммерсионное охлаждение
Серверы погружаются в непроводящую диэлектрическую жидкость внутри специально спроектированного резервуара. Тепло передаётся напрямую от всех компонентов к жидкости, которая затем перекачивается к теплообменнику. Это решение с жидкостным охлаждением обеспечивает максимальную плотность и полностью устраняет вентиляторы.
Двухфазное иммерсионное охлаждение
Диэлектрическая жидкость кипит при низкой температуре; пар поднимается, конденсируется на охлаждаемой катушке и стекает обратно. Двухфазное иммерсионное охлаждение обеспечивает ещё большее отведение тепла на литр и пассивную циркуляцию (для жидкости не нужны насосы), хотя требует осторожного обращения с паром.
Безопасно ли и надёжно ли жидкостное охлаждение?
Жидкость и электроника несовместимы — а как насчёт утечек?
Современные конструкции решений с жидкостным охлаждением используют диэлектрические жидкости (при иммерсионном охлаждении) или дистиллированную воду с ингибиторами коррозии в герметичных контурах cold plate. Системы обнаружения утечек и быстросъёмные соединения с защитой от утечек являются стандартными. При иммерсионном охлаждении платы спроектированы для работы в погружённом состоянии — короткие замыкания невозможны, поскольку жидкость является непроводящей.
Модернизация дорога и сложна
Хотя первоначальные капитальные затраты на инфраструктуру жидкостного охлаждения (резервуары, CDU, трубопроводы) могут быть выше, чем для воздушного, совокупная стоимость владения (TCO) за 3–5 лет почти всегда ниже благодаря экономии энергии, увеличению плотности и продлению срока службы оборудования. Многие поставщики предлагают модульные комплекты решений с жидкостным охлаждением, совместимые со стандартными 19-дюймовыми стойками.
А как насчёт обслуживания и доступа?
Иммерсионные резервуары позволяют проводить горячую замену серверов — просто поднимите сервер, слейте излишки жидкости и выполните обслуживание. Потери жидкости минимальны, и её можно долить. Контуры прямого охлаждения чипов используют быстросъёмные соединители, которые автоматически отключаются при отсоединении.
Жидкостное охлаждение больше не является опцией — оно необходимо
Отрасль достигла переломного момента. Воздушное охлаждение просто не справляется с тепловыми нагрузками современных AI-ускорителей, процессоров с большим числом ядер и плотных массивов хранения данных. Решение с жидкостным охлаждением обеспечивает тепловой запас, энергоэффективность и надёжность, необходимые для дата-центров следующего поколения.
Независимо от того, выберете ли вы прямое охлаждение чипов, однофазное или двухфазное иммерсионное охлаждение, переход с воздуха на жидкость — это стратегическая инвестиция, которая окупается за счёт более низких эксплуатационных расходов, более высокой плотности вычислений и улучшенных показателей устойчивости. По мере того как дата-центры стремятся к углеродной нейтральности и целям net-zero, жидкостное охлаждение — это не просто лучше воздушного охлаждения, это единственный масштабируемый путь вперёд.
发表回复