За последние два года плотность мощности в стойках выросла быстрее, чем за предыдущее десятилетие. Кластеры для обучения ИИ обычно потребляют 40–80 кВт на стойку, а флагманские GPU-системы превышают 100 кВт — на таком уровне традиционное серверное кондиционирование уже не имеет запаса. Жидкостное охлаждение превратилось из нишевой технологии в выбор по умолчанию для новых высокоплотных объектов.
Почему воздуха уже недостаточно
При фальшполе с подачей холодного воздуха стандартная стойка отводит порядка 1 кВт; даже полностью изолированные горячие и холодные коридоры с трудом работают выше 20–30 кВт. С ростом плотности GPU выбор сводится к двум вариантам: масштабная избыточная подача воздуха — шумно, энергоёмко и дорого — либо перенос тепла гораздо более эффективной средой: водой.
Жидкость переносит примерно в 3500 раз больше тепла на единицу объёма, чем воздух, поэтому небольшой контур хладагента заменяет целые стены вентиляторов.
Три уровня внедрения
- Теплообменники задних дверей — самый щадящий апгрейд: дверь стойки сама становится охлаждающим змеевиком, серверы не дорабатываются, обычно до 40–60 кВт на стойку.
- Холодные пластины с рядными CDU — блоки распределения хладагента в паре с пластинами прямого охлаждения чипов закрывают современные GPU-стойки и являются базой для большинства новых ИИ-залов.
- Иммерсионные системы — серверы погружаются в диэлектрическую жидкость для максимальной плотности и почти бесшумной работы; пока в основном для специально построенных площадок.
Что проверить до старта
Начинайте с объекта, а не с оборудования: несущая способность перекрытий, трассировка труб, управление качеством хладагента и резервирование N+1 насосов и теплообменников влияют на надёжность сильнее любого отдельного компонента. Выбирайте вендоров с полным портфелем — питание, охлаждение и мониторинг из одной интеграционной экосистемы. Vertiv, Huawei, Delta и KSTAR сегодня выпускают зрелые линейки для жидкостного охлаждения — от чиллеров и CDU до распределительных коллекторов, а их референс-проекты сокращают путь от плана до ввода в эксплуатацию.
Большинство площадок приходят к гибридной стратегии: жидкостное охлаждение для новых ИИ-рядов, оптимизированная изоляция воздуха — для существующих стоек. Такой поэтапный путь защищает текущие инвестиции и оставляет простор для следующего поколения ускорителей.
Математика охлаждения: где воздух упирается в потолок
У воздушного охлаждения практический потолок — примерно 15–25 кВт на стойку при холодных/тёплых коридорах с изоляцией, и даже лучшие задние дверные теплообменники заканчиваются около 30–40 кВт. Современные ИИ-кластеры потребляют 40–120 кВт на стойку — территория, где direct-to-chip жидкостное охлаждение не апгрейд, а единственный вариант. Вода переносит примерно в 3 500 раз больше тепла на единицу объёма, чем воздух — поэтому 20-мм шланг с хладагентом выигрывает у стены вентиляторов.
Планируйте переход вокруг вашей CDU (coolant distribution unit): она изолирует контур воды здания от чистых контуров хладагента у стоек, контролирует расход/температуру/течи и даёт отсечные клапаны, благодаря которым возможно обслуживание на уровне стойки. Наш гид по выбору прецизионного охлаждения охватывает воздушную сторону, которая продолжает обслуживать унаследованные ряды.
Внедрять жидкостное охлаждение, не снося серверную
Мало кто может перестроиться за одну ночь. Рабочий паттерн таков: новые ряды отдаются под liquid-ready стойки (верхняя подача через коллекторы, класс 100 кВт), существующие изолированные коридоры остаются на доведённом воздухе, а оба контура связывает общая чиллерная станция, рассчитанная на конечное состояние. Сначала энергия — жидкостное охлаждение переносит узкое место с охлаждения на плотность мощности, поэтому ёмкость шинопровода и запас ИБП нужно планировать под эру стоек 100 кВт, даже если в этом году вы ставите стойки на 30 кВт.
Q: Безопасно ли жидкостное охлаждение для серверной?
Современные direct-to-chip системы используют контуры отрицательного давления или шнуры детекции течей на каждом коллекторе: при разрыве воздух втягивается внутрь, а не выталкивает хладагент наружу. Контуры здания и технологии остаются разделёнными на CDU. Реальное окно риска — монтаж: требуйте гидравлические испытания и сухую пусконаладку до подачи живого оборудования.
Q: Сколько тепла жидкостное охлаждение снимает по сравнению с воздухом?
Воздух заканчивается около 25–40 кВт на стойку даже с изоляцией и дверными теплообменниками. Direct-to-chip штатно держит 80–120+ кВт на стойку, иммерсия уходит ещё дальше. Для большинства площадок перелом находится между 30–50 кВт на стойку — там жидкость дешевле на снятый ватт, чем наращивание CRAC.
Q: Обязательно менять все стойки ради жидкостного охлаждения?
Нет. Гибридный путь — стандарт: ряды liquid-ready для новой ИИ-техники, существующие ряды на доведённой воздушной изоляции, общая чиллерная станция. CDU и коллекторы добавляются только в новых рядах, а вложения в воздушную сторону продолжают работать, пока циклы обновления естественным образом не мигрируют старый парк.
Q: Что такое CDU и нужна ли она?
Блок распределения хладагента качает и регулирует хладагент между контуром воды здания и контурами уровня стойки, со встроенным теплообменником, насосами, фильтрами и детекцией течей. До примерно 50 кВт жидкостной нагрузки работают стойко-интегрированные CDU; выше стандартной точкой контроля становятся CDU в ряду или в комнате, и вам понадобится резервирование (N+1 насосов как база).