Вы постоянно слышите о растущих требованиях к вычислительным мощностям ИИ. Но настоящее узкое место — не GPU, а инфраструктура вокруг него. Кластерам для обучения ИИ требуется плотность стоек, намного превышающая возможности традиционных ЦОД с воздушным охлаждением, — часто от 50 kW до более чем 150 kW на стойку. Именно здесь на сцену выходит новый класс инфраструктуры: Container AIDC (Artificial Intelligence Data Center — центр обработки данных для искусственного интеллекта) — сборный модульный ЦОД, спроектированный специально для рабочих нагрузок ИИ.
Что такое Container AIDC? Определение и основная концепция
Container AIDC — это не традиционный центр обработки данных. В отличие от обычных объектов, построенных по принципу «хранить и обслуживать», центр обработки данных для ИИ строится вокруг самих данных — он ориентирован на то, чтобы «хорошо использовать и хорошо контролировать», а не просто «хранить и обслуживать». Представьте его как интеллектуальный логистический хаб, где каждый фрагмент данных очищается, маркируется и индексируется в момент поступления и сразу готов к использованию моделями ИИ.
Все функциональные подсистемы — ИТ-вычисления, распределение питания, охлаждение, сеть и управление — размещаются внутри стандартных ISO-контейнеров, собираются и проходят предварительное тестирование на заводе, а затем поставляются как единый интегрированный модуль. После доставки достаточно установить его на подготовленную бетонную плиту, подключить внешнее питание и оптоволокно — и запустить.
Модель поставки «от завода до площадки»
От Lego-кубиков до центра обработки данных: как устроена архитектура
Container AIDC не строят — его собирают. Каждый контейнер выступает как независимый строительный блок, изготовленный на заводе для стандартизированной транспортировки и соединения на площадке. Архитектура следует нисходящему принципу проектирования «системы систем».
Многоуровневая архитектура: от контейнера к кластеру
Интеграция на уровне контейнера: каждый ISO-контейнер длиной 20 или 40 футов вмещает полный, готовый к работе фрагмент ЦОД. Вычислительные узлы ИТ, высокоскоростная сетевая фабрика, устройства распределения питания (PDU), источники бесперебойного питания (UPS), батарейные шкафы, распределители хладагента (CDU) и контроллеры управления — всё это находится внутри одного герметичного корпуса с контролируемым климатом.
Межмодульное соединение: контейнеры не изолированы. Заранее проложенные шинопроводы питания, оптоволоконные магистрали и коллекторы жидкостного охлаждения с разъемами blind-mate позволяют объединять соседние контейнеры в единый логический кластер. Такое соединение по принципу plug-and-play исключает прокладку кабелей и труб на площадке, сокращая сроки развертывания до нескольких недель.
Масштабирование кластера: нужно больше вычислительной мощности? Добавьте еще один контейнер параллельно. Нужно переехать? Отключите, погрузите на трал и разверните на новом месте. Такая настоящая модульность дает модель «плати по мере роста» и позволяет избежать избыточного резервирования, типичного для традиционного строительства.
Функциональные модули внутри контейнера
Каждый Container AIDC разделен на функциональные модули целевого назначения, интегрированные на заводе и взаимозаменяемые на площадке:
- ИТ-модуль – стойки с GPU/XPU-серверами (например, NVIDIA HGX), а также коммутаторы top-of-rack (ToR) и узлы хранения данных.
- Модуль питания – высокоплотные ИБП, литий-ионные батарейные шкафы и распределительные щиты. Для сверхвысокой плотности производители, такие как Huawei, предлагают моноблочные силовые модули Power POD на 3.2MW, поддерживающие 3.2 MW в одном транспортном контейнере.
- Модуль охлаждения – системы жидкостного охлаждения: от пластин прямого охлаждения чипов (cold plate) до баков полного погружения.
- Сетевой модуль – высокоскоростные коммутаторы spine/leaf со встроенными оптическими трансиверами.
- Модуль управления – контроллеры DCIM с удаленным мониторингом, предиктивным обслуживанием и оптимизацией на основе ИИ.
Разбираем компоненты Container AIDC
Теперь откроем дверь контейнера и заглянем внутрь.
Корпус для вычислений высокой плотности («мозг»)
В вычислительном корпусе сосредоточена вычислительная мощность ИИ. Стойки внутри Container AIDC рассчитаны на 60–100 kW на стойку, и каждая стойка вмещает несколько 4U GPU-серверов или 2U XPU-узлов. Традиционные открытые стойки с вентиляторами на задней двери здесь не работают: вместо них герметичные корпуса с заблокированным потоком воздуха спереди назад и холодные пластины, установленные непосредственно на процессорах, обеспечивают экстремальную плотность, необходимую для обучения и инференса ИИ.
Устройство распределения питания («сердце»)
Поскольку плотность мощности определяет инфраструктуру ИИ, вся электрическая цепочка спроектирована на высокие токи при высокой эффективности. Начиная с ввода от энергосети, типичный Container AIDC включает:
- Трансформаторная подстанция среднего напряжения (если внешняя сеть — среднего напряжения).
- Главный распределительный щит низкого напряжения с автоматическим вводом резерва (ATS) для переключения на генератор.
- Модульные ИБП – для кластера на 1 MW обычно используются два параллельных модуля ИБП по 600 kVA. Современные конструкции ИБП достигают КПД 99.1% в режиме S-ECO, значительно снижая потери энергии.
- Литий-ионные батарейные шкафы – плотность энергии в 4× выше, чем у свинцово-кислотных аккумуляторов, срок службы 15+ лет, облачная BMS с контролем на уровне ячеек и обнаружением теплового разгона.
- Устройства распределения питания (PDU) – интеллектуальные PDU в каждой стойке в реальном времени сообщают мощность (kW), напряжение, ток и коэффициент мощности по каждой розетке.
Система жидкостного охлаждения («лёгкие»)
Это самое важное отличие от традиционных ЦОД. Воздушное охлаждение ограничено 15–20 kW на стойку, тогда как современным GPU для ИИ требуется 50–150 kW. Жидкостное охлаждение — обязательное решение.
Container AIDC поддерживают несколько топологий жидкостного охлаждения:
- Прямое охлаждение чипа (cold plate) – хладагент циркулирует по микроканалам холодной пластины, установленной непосредственно на кристалл процессора, отводя 500–2000 W с каждого чипа. Это основной выбор для высокоплотных GPU-кластеров.
- Иммерсионное охлаждение (однофазное или двухфазное) – серверы полностью погружаются в диэлектрическую жидкость. Жидкость поглощает тепло и циркулирует через внешний теплообменник. Такой подход полностью исключает вентиляторы и позволяет достигать PUE до 1.05.
Оба метода используют одну и ту же замкнутую архитектуру: основное устройство распределения хладагента (CDU) прокачивает охлаждающую жидкость через стойки, отводя тепло к наружному сухому охладителю, градирне или системе холодоснабжения объекта.
Защита от внешней среды и пожаротушение
Промышленные классы герметизации (IP55 и выше) гарантируют защиту от пыли, соли и влаги. Для пожаротушения используются системы предварительного действия (pre-action) с сухими трубами или газовые системы на чистых агентах (Novec 1230 или FM-200), а в каждом отсеке установлены датчики температуры и дыма. Контейнеры с иммерсионным охлаждением обладают уникальным преимуществом: функцию пожаротушения выполняет сама диэлектрическая жидкость — дополнительная химическая система не требуется.
Умное управление и наблюдаемость
Container AIDC — это не «глупый ящик», а полностью оснащенная датчиками система под управлением ИИ. Встроенный шлюз управления инфраструктурой ЦОД (DCIM) агрегирует данные с тысяч точек: температура каждого GPU, расход хладагента, нагрузка ИБП, ток в ветвях PDU, датчики утечек, контакты дверей и многое другое. На основе этих данных алгоритмы ИИ выполняют предиктивную аналитику — предупреждают о сбое вентилятора ИБП до его отказа или перераспределяют вычислительную нагрузку, чтобы избежать тепловых точек.
Как развертывается Container AIDC
Развертывание Container AIDC следует предсказуемому и ускоренному процессу, который обеспечивают заводская предварительная сборка и параллельное строительство.
Шаг 1 – Подготовка площадки (параллельно с заводским производством). Готовится ровная бетонная плита или асфальтовая площадка с выводами инженерных коммуникаций: фидерами среднего или высокого напряжения, кабелепроводами для оптоволокна и линиями водоснабжения и водоотведения (если используется испарительное охлаждение). Поскольку контейнеры будут устанавливаться краном, здание или система подвесных кранов не требуются.
Шаг 2 – Заводская интеграция и тестирование. Пока идет подготовка площадки, производитель собирает каждый контейнер в контролируемой заводской среде. Заполняются ИТ-стойки, прокладываются кабели, устанавливаются и заряжаются батареи ИБП, заполняются и опрессовываются контуры хладагента, а полные испытания системной интеграции идут 72+ часа.
Шаг 3 – Транспортировка и установка на площадке. Готовые контейнеры загружаются на тралы и доставляются к месту назначения. Мобильный кран поднимает каждый контейнер на подготовленную плиту, устанавливая их рядом друг с другом или штабелируя до четырех ярусов на площадках с ограниченным пространством.
Шаг 4 – Соединение и обкатка. Контейнеры механически скрепляются болтами. Соединяются заранее проложенные шинопроводы и оптоволоконные магистрали, а коллекторы жидкостного охлаждения подключаются через разъемы blind-mate. Интегрированный шлюз DCIM включается для удаленного мониторинга, а 48-часовое испытание под нагрузкой (burn-in) прогоняет все подсистемы в условиях имитации нагрузки.
Общие сроки от заказа до запуска: 4–6 месяцев для развертывания «с нуля» (greenfield) или всего 15 дней для расширения кластера в рамках существующей площадки AIDC.
Заводская предварительная сборка: секрет быстрой поставки
Строительство традиционного ЦОД идет последовательно: вырыть котлован, возвести металлоконструкции, залить полы, смонтировать электрику, установить инженерные системы, завезти ИТ-оборудование. Любая задержка каскадом отражается на всем графике. Container AIDC переворачивает эту модель с ног на голову.
Всё происходит параллельно:
- Строительные работы готовят плиту на площадке заказчика.
- Завод изготавливает контейнеры.
- Поставщик тестирует интегрированную систему.
Поскольку контейнеры изготавливаются по стандартным ISO-размерам и спецификациям интерфейсов, их можно перевозить любым тралом, железнодорожной платформой или грузовым судном. Соединение на площадке выполняется с помощью стандартизированных шинопроводов, оптоволоконных магистралей и жидкостных коллекторов с разъемами blind-mate — просто подключи, и никаких работ на месте не требуется.
Модульная сборка радикально сокращает сроки: проекты можно ввести в эксплуатацию менее чем за половину времени традиционного строительства. Ведущие производители, такие как Huawei, уже реализовали по этой методологии более 130 проектов AIDC по всему миру.
Container AIDC против традиционного ЦОД: сравнение характеристик
Продуктовая линейка контейнерных решений
Поставщики Container AIDC предлагают многоуровневую линейку продуктов для разных масштабов развертывания. В таблице ниже показана типовая структура портфеля.
Каждая серия поставляется как полностью интегрированный, предварительно протестированный модуль — достаточно подключить внешние коммуникации и развернуть. Такой продуктовый подход превращает мощности ЦОД для ИИ в позицию каталога, которую заказывают как корпоративное ИТ-оборудование, а не как объект недвижимости по индивидуальному проекту.
Готовы к вашему ИИ-будущему
Решения на основе Container AIDC принципиально меняют представление о том, каким может быть ЦОД для ИИ: точность заводского изготовления, жидкостное охлаждение, модульная масштабируемость и развертывание за месяцы, а не за годы. В SOETECK платформа контейнерного жидкостного охлаждения AICoolit™ спроектирована для экстремальной плотности — до 100 kW на стойку и PUE до 1.15, от периферийных модулей на 200 kW до суперкомпьютерных кластеров на 1 MW. Никаких задержек строительства. Никаких потолков плотности мощности. Просто ИИ-инфраструктура, которая развертывается так же быстро, как обучаются ваши модели.
发表回复