Эта статья, подкреплённая данными, содержит углублённый технический анализ и тематические исследования, связанные с практическим применением, и отвечает на ключевые вопросы о том, почему решения жидкостного охлаждения для центров обработки данных превосходят воздушное охлаждение, предлагая ценные сведения для ИТ-руководителей и операторов ЦОД.
В эпоху стремительно растущих нагрузок ИИ, HPC и плотности мощности охлаждение центров обработки данных превратилось из «вспомогательной функции» в ключевой фактор повышения эффективности, надёжности и снижения затрат. Воздушное охлаждение — традиционный стандарт, используемый десятилетиями, — уже приближается к пределу своих возможностей, тогда как решения жидкостного охлаждения для центров обработки данных всё чаще становятся предпочтительным выбором для дальновидных предприятий.
Насколько эффективна передача тепла в решениях жидкостного охлаждения?
Эффективность передачи тепла — это основа эффективного охлаждения, и здесь жидкостное охлаждение доминирует.
Жидкости (такие как диэлектрические охлаждающие жидкости или водно-гликолевые смеси) обладают такими теплофизическими свойствами, которым воздух просто не может соответствовать:
Жидкости проводят тепло в 23–25 раз быстрее, чем воздух. Например, теплопроводность воды составляет около 0,6 Вт/(м·К) при 25 °C, тогда как у воздуха — лишь около 0,026 Вт/(м·К).
Жидкости могут поглощать в 3000+ раз больше тепла на единицу объёма, чем воздух, прежде чем произойдёт повышение температуры. Это означает, что решения жидкостного охлаждения могут отводить тепло от критически важных компонентов (CPU, GPU, ASIC) напрямую и в больших масштабах.
Воздушное охлаждение, напротив, полагается на принудительную конвекцию, чтобы переносить тепло от компонентов в окружающий воздух, — процесс, затрудняемый множеством термических сопротивлений (например, от чипа к радиатору, от радиатора к воздуху и от воздуха к системе HVAC). Эти сопротивления создают «горячие точки» (распространённые в плотных GPU-стойках) и ограничивают мощность охлаждения.
Воздушное охлаждение в большинстве центров обработки данных достигает максимума примерно 10–15 кВт на стойку. Решения жидкостного охлаждения для ЦОД — особенно иммерсионные или конструкции с холодной пластиной — легко справляются с 50–100 кВт на стойку, а некоторые HPC-объекты достигают 200+ кВт. Это делает жидкостное охлаждение незаменимым для нагрузок ИИ/ML, где один GPU может потреблять более 400 Вт.
Могут ли решения жидкостного охлаждения обеспечить более низкий PUE, чем воздушное охлаждение?
Да — и со значительным отрывом. PUE — это золотой стандарт эффективности центров обработки данных, и жидкостное охлаждение доводит PUE до уровней, недостижимых для воздушного охлаждения.
Типичные центры обработки данных с воздушным охлаждением имеют PUE 1,5–1,8 (то есть 50–80% всей энергии расходуется на нужды, не связанные с ИТ, такие как охлаждение). Даже «эффективные» объекты с воздушным охлаждением редко опускаются ниже 1,4.
Современные решения жидкостного охлаждения для центров обработки данных достигают PUE 1,05–1,15. Иммерсионное жидкостное охлаждение, которое устраняет серверные вентиляторы и снижает зависимость от HVAC, в оптимальных условиях может достигать 1,02–1,08.
Жидкостное охлаждение отводит тепло напрямую от компонентов, устраняя энергозатратные промежуточные звенья (например, серверные вентиляторы, которые потребляют 10–25% мощности ИТ, и крупные блоки CRAC/CRAH).
Многие системы жидкостного охлаждения используют «свободное охлаждение» круглый год: холодный наружный воздух или вода (без механического охлаждения) охлаждают циркулирующую жидкость, что ещё больше снижает энергопотребление.
ИИ-центр обработки данных гиперскейлера, использующий иммерсионное жидкостное охлаждение для 500 GPU-серверов (50 кВт/стойку), достиг PUE 1,08 — сэкономив более 400 000 кВт·ч в год по сравнению с эквивалентом на воздушном охлаждении (PUE 1,6).
Как решения жидкостного охлаждения поддерживают более высокую мощность?
Рост ИИ и HPC поднял плотность мощности стоек с 5–10 кВт (традиционные) до 30–100+ кВт (современные). Воздушное охлаждение не успевает за этим — жидкостное охлаждение является единственным жизнеспособным решением для плотных развёртываний.
При плотности выше 15 кВт на стойку воздушное охлаждение требует непрактично больших вентиляторов, более широких горячих коридоров и крупногабаритных систем HVAC. Горячие точки становятся неизбежными, что приводит к троттлингу или отказу компонентов.
Гибкость жидкостного охлаждения:
Подключается напрямую к CPU/GPU, охлаждая отдельные компоненты при 30–50 кВт на стойку — идеально для модернизации существующих серверов.
Полностью погружает серверы в диэлектрический хладагент, поддерживая 50–100+ кВт на стойку без горячих точек.
Жидкостное охлаждение устраняет необходимость в больших воздуховодах, вентиляторных блоках и широких коридорах. Центры обработки данных могут сократить занимаемую площадь на 30–50%, размещая при этом в 2–3 раза больше вычислительной мощности.
Организации могут масштабировать вычислительные мощности без расширения площади ЦОД — что критически важно для городских локаций, где недвижимость дорога.
Надёжнее ли решения жидкостного охлаждения, чем воздушное охлаждение?
Да — жидкостное охлаждение снижает риски простоев и продлевает срок службы оборудования.
Жидкостное охлаждение поддерживает температуру компонентов в пределах ±1 °C по сравнению с ±5–8 °C при воздушном охлаждении. Постоянные температуры сводят к минимуму термическое напряжение на чипах, конденсаторах и других чувствительных деталях, снижая частоту отказов на 30–50%.
Воздушное охлаждение опирается на тысячи серверных вентиляторов и HVAC-нагнетателей — все они подвержены износу, накоплению пыли и отказам. В системах жидкостного охлаждения гораздо меньше движущихся частей (например, насосы, клапаны), что снижает годовую частоту отказов с 3–5% (воздух) до 0,5% и ниже (жидкость).
Иммерсионные и замкнутые решения жидкостного охлаждения герметичны, что предотвращает попадание пыли, влаги или коррозионных частиц к компонентам. Это особенно ценно в промышленных или прибрежных центрах обработки данных, где качество воздуха низкое.
Меньше отказов оборудования и более длительный срок службы серверов (продлевается на 15–20% при жидкостном охлаждении) снижают затраты на замену и незапланированные простои — экономя организациям более 100 000 долларов в год для ЦОД среднего размера.
Поддерживают ли решения жидкостного охлаждения цели устойчивого развития?
Безусловно — жидкостное охлаждение является краеугольным камнем «зелёных центров обработки данных» и стратегий сокращения выбросов углерода.
Снижая PUE и уменьшая потребление энергии, жидкостное охлаждение сокращает выбросы Scope 2 (от электроэнергии из сети). Центр обработки данных мощностью 1 МВт с жидкостным охлаждением (PUE 1,1) выбрасывает на 30–40% меньше CO₂, чем эквивалент на воздушном охлаждении (PUE 1,6).
Вопреки распространённому мифу, многие решения жидкостного охлаждения используют меньше воды, чем воздушное охлаждение. Центры обработки данных с воздушным охлаждением полагаются на испарительные охладители (которые потребляют 20–40 галлонов воды на кВт в год), тогда как системы жидкостного охлаждения замкнутого цикла используют минимум воды (или вообще не используют её в конструкциях на основе диэлектрического хладагента). Жидкостное охлаждение с холодной пластиной может сократить потребление воды на 45% по сравнению с воздушным охлаждением.
Жидкостное охлаждение улавливает тепло при 40–50 °C (по сравнению с 25–30 °C при воздушном охлаждении), что делает его пригодным для централизованного теплоснабжения, отопления офисов или промышленных процессов. Такое «вторичное» тепло может покрывать более 30% потребностей здания в тепловой энергии, превращая центры обработки данных в нетто-поставщиков энергии.
Какие эксплуатационные преимущества дают решения жидкостного охлаждения?
Помимо эффективности и надёжности, жидкостное охлаждение улучшает повседневную эксплуатацию и условия труда:
Серверные вентиляторы сокращаются или устраняются. Центры обработки данных с жидкостным охлаждением работают при 40–50 дБ (сопоставимо с офисом) по сравнению с 65–75 дБ (при воздушном охлаждении, что эквивалентно пылесосу). Это улучшает условия труда и позволяет строить ЦОД ближе к городским районам.
Системы жидкостного охлаждения требуют менее частых проверок, чем воздушное охлаждение (например, отсутствует очистка вентиляторов, замена фильтров или осмотр воздуховодов). Многие современные решения включают удалённый мониторинг уровня хладагента, производительности насосов и температуры — сокращая время обслуживания на объекте на 20–30%.
По мере продолжения роста плотности мощности (ожидается, что к 2030 году она достигнет 200 кВт на стойку) воздушное охлаждение устареет. Инвестиции в решения жидкостного охлаждения для ЦОД сегодня позволяют избежать дорогостоящей модернизации в будущем и обеспечивают совместимость с оборудованием нового поколения (например, квантовые вычисления, передовые ИИ-ускорители).
Какую роль играет CDU в решениях жидкостного охлаждения?
CDU (Cooling Distribution Unit) — это «центральная нервная система» систем жидкостного охлаждения и ключевая причина, по которой они превосходят воздушное охлаждение по масштабируемости, точности и надёжности. В отличие от воздушного охлаждения (в котором отсутствует сопоставимый централизованный компонент управления), решения жидкостного охлаждения для ЦОД зависят от CDU в управлении всем жизненным циклом хладагента, что делает их незаменимыми для развёртываний высокой плотности.
Основные функции CDU:
CDU содержат насосы (часто с частотно-регулируемым приводом, VFD), которые циркулируют хладагент (водно-гликолевую жидкость или диэлектрическую среду) между ИТ-оборудованием (серверы, GPU) и внешним источником охлаждения (например, чиллеры, сухие градирни или системы свободного охлаждения). Они поддерживают постоянное давление (обычно 2–4 бара), обеспечивая равномерное охлаждение всех стоек — устраняя «дисбаланс потока», вызывающий горячие точки в системах с воздушным охлаждением.
CDU интегрируют теплообменники (например, пластинчатые или кожухотрубные) для регулировки температуры хладагента до того, как он достигнет ИТ-компонентов. Продвинутые CDU достигают точности температуры ±0,5 °C — гораздо более жёсткой, чем ±5–8 °C при воздушном охлаждении. Например, CDU может подавать хладагент при 22–24 °C к холодным пластинам, обеспечивая работу GPU при оптимальных рабочих температурах (35–45 °C) даже при 100% нагрузке.
CDU включают высокоэффективные фильтры для удаления загрязнений, коррозионных частиц или пузырьков воздуха из контура хладагента. Это предотвращает засорение холодных пластин или серверных каналов охлаждения — распространённую точку отказа в плохо управляемых жидкостных системах — и продлевает срок службы насосов и клапанов.
Современные CDU включают датчики реального времени для температуры, давления, скорости потока и уровня хладагента в сочетании с программным обеспечением удалённого управления (например, интеграция с BMS). Они также включают механизмы безопасности: обнаружение утечек (с помощью датчиков влажности), автоматические запорные клапаны и байпасные контуры для предотвращения простоев в случае отказа компонента.
CDU модульны, что позволяет центрам обработки данных наращивать мощность по мере увеличения плотности стоек (например, с 50 кВт/стойку до 100 кВт/стойку). VFD-насосы регулируют скорость в зависимости от потребности в охлаждении, снижая потребление энергии на 15–25% по сравнению с насосами с фиксированной скоростью.
Почему решения жидкостного охлаждения для ЦОД — это будущее
Технология воздушного охлаждения десятилетиями служила отрасли центров обработки данных, но она больше не может удовлетворять требованиям искусственного интеллекта, высокопроизводительных вычислений и высокоплотных вычислений. Решения жидкостного охлаждения для ЦОД обеспечивают превосходную передачу тепла, более низкие значения PUE, поддержку более высокой плотности мощности, большую надёжность и повышенную экологичность — всё это способствует снижению долгосрочных затрат.
Для ИТ-руководителей и операторов ЦОД вопрос больше не звучит как «Стоит ли нам внедрять жидкостное охлаждение?», а как «Когда?». Ответ таков: чем раньше, тем лучше. С ростом нагрузок и повышением цен на энергию жидкостное охлаждение — это не просто модернизация, а стратегическая необходимость для сохранения конкурентоспособности, эффективности и устойчивости.
Если вы рассматриваете переход на жидкостное охлаждение, начните с пилотного проекта, например с модернизации GPU-стойки на охлаждение с холодной пластиной, чтобы оценить ROI и получить практический опыт. Преимущества — более низкие затраты на энергию, меньше простоев и меньший углеродный след — станут очевидными сами собой.
发表回复