ОХЛАЖДЕНИЯ СЕРВЕРНЫХ СТОЕК
ДВУХФАЗНЫЕ КОНТУРЫ
Современные серверные достигли физического предела. Плотность тепловыделения серверных стоек растет быстрее, чем возможности классического воздушного охлаждения. Проблема вышла за рамки вопросов удобства или экономии ресурсов. Это вопрос работоспособности, плотности размещения и экономической модели ЦОД.
1. Проблема: тепловой барьер уже достигнут
Традиционная архитектура дата-центра строится на простом принципе: воздух, прогоняемый вентиляторами через серверные радиаторы, забирает тепло и выбрасывается наружу. Долгое время эта схема оставалась разумной — серверы потребляли немного, и плотность их размещения не вынуждала искать экстремальные решения.
Но текущая реальность другая. GPU и ускорители обучения нейросетей дают огромную локальную тепловую нагрузку. При такой концентрации тепла возникают три системные проблемы.
Проблема 1. Непропорциональный рост расхода воздуха
Для отвода десятков киловатт требуется кратный рост воздушного потока. Это увеличивает габариты вентиляционного тракта, усложняет компоновку и приводит к росту энергопотребления на вспомогательные системы.
Проблема 2. Шум и механический износ
Чем выше обороты вентиляторов, тем выше шум, вибрация и деградация ресурса. В high-density окружении это уже не локальный дискомфорт, а технический риск эксплуатации.
Проблема 3. Температурные градиенты внутри процессоров
Воздушное охлаждение не обеспечивает достаточной равномерности отвода тепла. На практике это означает локальные горячие зоны, снижение стабильности частот и риск троттлинга. Для AI-нагрузок это прямой удар по производительности, поскольку потери идут не только в ваттах, но и в полезных токенах, батчах и времени обучения.
2. Решение: двухфазный контур с насосом
Технология двухфазного насосного контура строится не на нагреве, а на фазовом переходе состояния теплоносителя. Это кардинально иной уровень эффективности: энергия тратится не на повышении температуры жидкости, а на ее превращение в пар — процесс, поглощающий на порядки больше тепла.
Именно здесь и появляется ключевое отличие. Однофазная система переносит тепло за счет изменения температуры. В двухфазной системе теплопоглощение происходит не за счет нагрева, а за счет фазового перехода «жидкость — пар» при парообразовании. В инженерном смысле это означает резкое повышение тепловой емкости на единицу массы и возможность стабилизировать температурный режим чипа почти изотермически.
Фазовый переход — это не просто улучшение, это прыжок в другой класс энергоэффективности. На высоких плотностях мощности речь идёт о принципиально иной физике отвода тепла.
3. Физика процесса: почему это работает
Чтобы нагреть 1 грамм воды на 1 °C, требуется примерно 4,18 Дж. Но чтобы превратить тот же 1 грамм воды в пар при той же температуре, требуется около 2260 Дж. Разница огромна. И именно она делает двухфазное охлаждение настолько мощным инструментом.
Простая интерпретация выглядит так. Если жидкость просто течет по каналу и нагревается, она быстро достигает предельной температуры. Если же жидкость кипит в зоне максимального тепловыделения, то каждая порция вещества уносит на порядки больше энергии. Это резко снижает требования к массовому расходу и насосной мощности.
Практический эффект выражается в том, что массовый расход теплоносителя можно сократить в 10–20 раз по сравнению с водяными системами сопоставимой мощности. Для решений около 30 кВт это означает переход от крупных потоков и мощной гидравлики к компактной трубной обвязке и миниатюрному насосу, работающему только с жидкой фазой.
4. Анатомия системы: как проходит цикл
Система устроена как замкнутый цикл, где каждый узел выполняет строго определенную функцию. Это важно, потому что в двухфазных схемах ошибка в одном месте сразу отражается на устойчивости всего контура.
Испаритель или Cold Plate
Жидкость поступает в холодную пластину, установленную непосредственно на CPU или GPU. Внутри находятся микроканалы или пористая структура, создающая большую площадь теплообмена и множество центров парообразования. Под воздействием тепла начинается кипение.
Паро-жидкостная смесь
На выходе из пластины образуется смесь пара и жидкости. Оптимальное паросодержание обычно находится в диапазоне 20–50 процентов. Это рабочая зона, при которой тепло уже эффективно унесено, но канал еще не высушен.
Коллектор стойки
Смесь поступает в распределительный коллектор через гибкие трубки и быстроразъемные соединения. Это обеспечивает модульность стойки и упрощает сервисные операции.
Конденсация и возврат
В теплообменнике пар конденсируется, отдавая тепло внешнему водяному контуру здания. После этого жидкость возвращается в ресивер, а насос снова подает ее в испарители.
Важно, что насос работает преимущественно с жидкой фазой. Это повышает надежность, снижает риск кавитационных режимов и упрощает управление контуром. В результате система становится не только эффективной, но и управляемой в долгом эксплуатационном цикле.
5. Сравнение двухфазной схемы и однофазной воды
Ниже приведено инженерное сравнение по ключевым эксплуатационным параметрам.
| Параметр | Двухфазный контур | Однофазная вода |
|---|---|---|
| Массовый расход при 30 кВт | 0,5–1 кг/мин | 10–20 кг/мин |
| Термическая стабильность | Практически постоянная температура в зоне кипения | Температура растет вдоль канала |
| Энергия на прокачку | Низкая | Выше из-за большего расхода и напора |
| Риск при утечке | Ниже при применении диэлектриков | Критичен для электроники и инфраструктуры |
| Сложность управления | Выше, требуется контроль давления и режима кипения | Ниже, схема проще |
6. Компоненты системы и их роль
Успешная реализация двухфазного охлаждения требует не только правильной физики, но и точной инженерной интеграции. Ошибка в компонентной базе может превратить потенциально сильную систему в источник простоя.
Cold Plates
Холодные пластины должны иметь очень низкое термическое сопротивление, порядка 0,02–0,05 °C/Вт. Их внутренняя геометрия должна поддерживать равномерное кипение и исключать сухие зоны.
Quick Disconnects
Быстроразъемные соединители дают возможность обслуживать сервер без разгерметизации всего коллектора. Это критично для модульной эксплуатации и быстрой замены узлов.
CDU
Coolant Distribution Unit содержит насос, теплообменник, ресивер и контроллер. Это сердце системы. Обычно блок занимает 2U и потребляет 300–600 Вт, обеспечивая отвод десятков киловатт тепла.
Трубная обвязка и коллекторы
Трубопроводы должны обеспечивать герметичность, низкие гидравлические потери и удобство обслуживания. В двухфазной схеме это не второстепенная арматура, а часть точного термогидравлического баланса.
Рабочие жидкости
- Диэлектрические жидкости типа 3M Novec 7100 или аналогичные составы с низкой температурой кипения.
- Хладагенты класса R1233zd(E) для герметичных контуров под избыточным давлением.
- Вода под вакуумом, где понижение давления позволяет добиться кипения примерно при 70 °C.
Выбор жидкости нельзя сводить к стоимости литра. Критичны совместимость с материалами, стабильность свойств, безопасность для электроники, требования к герметичности и сервисная пригодность.
7. Экономика: сколько стоит и когда окупается
Двухфазная система дороже классического водяного охлаждения, но существенно дешевле иммерсионных решений. Для стойки на 30 кВт ориентировочная стоимость под ключ находится в диапазоне 2,7–5,0 млн руб.
| Статья затрат | Ориентир, руб. | Комментарий |
|---|---|---|
| CDU | 1 350 000 – 2 250 000 | Основной капитальный узел |
| Коллекторы и трубная обвязка | 270 000 – 540 000 | Зависит от топологии стойки и типа разъемов |
| Рабочая жидкость | Около 18 000 – 27 000 за литр | Оценка для диэлектрических составов премиального класса |
| Итог на стойку | 2 700 000 – 5 000 000 | Без учета специфической доработки серверов |
Сама по себе высокая цена не является аргументом против технологии. Правильный вопрос другой: какой финансовый эффект она дает в течение срока эксплуатации? Здесь важны три канала экономии.
1. Снижение затрат на охлаждение
Использование температуры внешнего контура до 40 °C расширяет окно free cooling. Это снижает зависимость от чиллеров и уменьшает энергопотребление инженерной инфраструктуры.
2. Снижение потерь на вентиляцию
Отказ от мощных воздушных трактов и большого числа вентиляторов дает прямую экономию электроэнергии и уменьшает механический износ оборудования.
3. Повышение плотности стойки
Возможность размещать до 100 кВт в одной стойке дает прирост вычислительной плотности без пропорционального роста площади машинного зала.
4. Стабильность GPU под нагрузкой
Более ровный температурный режим уменьшает риск троттлинга. Для AI-задач это означает не только лучшую производительность, но и предсказуемость времени обучения.
8. Где технология уже используется
Технология вышла за пределы лабораторий. Ее применяют в суперкомпьютерах, AI-кластерах и высокомощных телекоммуникационных системах, где отказ от воздуха уже не является экспериментом, а становится инженерной необходимостью.
- Суперкомпьютерные комплексы уровня Fugaku, LUMI и аналогичных HPC-инсталляций.
- AI-кластеры на базе высокопроизводительных GPU и ускорителей обучения нейросетей.
- Высокомощное телекоммуникационное оборудование с высокой плотностью тепловыделения.
CoolIT Systems
Один из самых заметных игроков в области жидкостного охлаждения для HPC. Сильная сторона — индустриальная зрелость и широкая совместимость с серверной инфраструктурой.
ZutaCore
Известны акцентом на двухфазных схемах и подходом, ориентированным на высокую тепловую плотность. Это один из наиболее показательных примеров коммерциализации технологии.
Boyd
Фокусируются на интегрированных системах охлаждения, включая решения с теплообменом через задние двери стоек.
Asetek
Исторически сильны в жидкостном охлаждении и активно развивают решения для высокоплотных вычислительных платформ.
9. Ограничения и риски
У технологии есть слабые места, и их нельзя замалчивать. Двухфазный контур нельзя продавать как универсальное решение без инженерной оговорки.
- Требуется доработка каждого сервера под конкретный контур охлаждения.
- Герметичность должна быть высокой, особенно в системах с вакуумом или диэлектрическими жидкостями.
- Сервисные процедуры становятся более чувствительными к качеству сборки и дисциплине эксплуатации.
- Цена ошибки выше, чем у воздушных систем: неправильная сборка может привести к утечке, деградации теплового режима и простоям.
Это означает, что двухфазное охлаждение оправдано не везде. Для маломощных стоек оно избыточно. Для плотных GPU-ферм, AI-платформ и специализированных вычислительных узлов оно, напротив, становится логически обоснованным.
10. Итоговое резюме
Двухфазное охлаждение с насосом — это не просто альтернатива воде. Это переход к другому инженерному режиму, где тепло снимается не за счет наращивания воздушного потока, а за счет фазового перехода. Такой подход дает высокую тепловую плотность, стабильность температуры и компактность инфраструктуры.
Для современных серверов с TDP в сотни ватт и для стоек, приближающихся к 100 кВт, это уже не экзотика. Это ответ на реальное ограничение среды. В момент, когда воздух перестает справляться, фазовый переход превращается в рациональный и физически обоснованный путь.
Если сформулировать жестко: у высокоплотных вычислений есть два пути. Либо продолжать бороться с теплом, наращивая воздух, шум и энергопотери, либо использовать саму физику кипения как инструмент проектирования. Второй путь технологически сложнее, но именно он масштабируется в будущее.
11. Сжатый глоссарий ключевых терминов
| Термин | Определение |
|---|---|
| CDU | Блок распределения хладагента, содержащий насос, теплообменник и систему управления циркуляцией. |
| Cold Plate | Теплообменник, устанавливаемый непосредственно на чип, внутри которого происходит кипение рабочей жидкости. |
| Quick Disconnect | Быстроразъемный соединитель, обеспечивающий герметичное подключение и отключение сервера от контура. |
| Скрытая теплота парообразования | Количество энергии, которое жидкость поглощает при переходе в газообразное состояние без изменения температуры. |
| Диэлектрическая жидкость | Жидкость, не проводящая электрический ток и снижающая риск короткого замыкания при контакте с электроникой. |
| Ресивер | Емкость для разделения парожидкостной смеси и накопления сконденсированной жидкости перед подачей на насос. |
| PUE | Метрика энергоэффективности ЦОД, показывающая отношение общей потребляемой энергии к энергии ИТ-нагрузки. |
| Паросодержание | Доля пара в парожидкостной смеси на выходе из испарителя. |
| Коллектор | Трубопроводная система стойки, распределяющая поток к серверам и собирающая обратный поток. |
| Free cooling | Охлаждение за счет низкой температуры наружного воздуха без активной компрессорной холодильной машины. |
Оставайтесь на связи
Подпишитесь на новостную рассылку и будьте в курсе всех интересных событий и предложений!
Никакого спама гарантированно!