Прямое жидкостное охлаждение серверов: cold plate, CDU, расход и температура
Условная однофазная схема. Через стенки проходит тепло; жидкости не смешиваются. Жидкостно-воздушный CDU имеет другую границу. Открыть иллюстрацию в полном размере.
Прямое жидкостное охлаждение сервера начинается с небольшой металлической пластины над процессором, но заканчивается далеко за пределами стойки. Между ними находятся каналы, соединители, коллекторы, насосы, теплообменник и автоматика. Достаточно увеличить расход в одном месте, чтобы изменить давление, энергопотребление и распределение потока в остальных. Поэтому холодная подающая труба ещё не доказывает, что каждый кристалл получает нужное охлаждение.
Ниже рассматривается преимущественно однофазная система с cold plate и жидкостно-жидкостным CDU. Публичные документы и стадии оборудования сверены на 26 октября 2026 года. Числа в собственных примерах заданы для обучения, а не получены на оборудовании владельца сайта. Это разбор физических связей и проверяемых характеристик, без процедур вмешательства в работающий контур.
Содержание статьи
- 1. Что переносит тепло от транзисторов к жидкости
- 2. Два контура соединены теплом, а не обязательно общей водой
- 3. Тепловой баланс связывает мощность, расход и нагрев
- 4. Доля тепла в жидкости отличается от мощности всей стойки
- 5. Cold plate имеет одновременно тепловую и гидравлическую характеристику
- 6. Увеличение расхода приходится оплачивать давлением
- 7. Мощность насоса растёт быстрее полезного потока
- 8. Параллельные ветви делят давление, а не обязаны делить расход поровну
- 9. CDU переносит тепло через конечный температурный напор
- 10. Температурный класс не заменяет договор между сервером и зданием
- 11. Точка росы относится к местному воздуху и холодной поверхности
- 12. Химическая совместимость охватывает весь смоченный тракт
- 13. Частицы и газ меняют поток раньше явного отказа
- 14. Соединитель является обслуживаемой границей системы
- 15. Резервирование проверяют в режиме отказа
- 16. Повторное использование тепла зависит от его температуры
- 17. Паспортная мощность CDU требует условий и стадии подтверждения
- 18. Что составляет доказательство работающего охлаждения
- Первичные источники
- Читайте также
1. Что переносит тепло от транзисторов к жидкости
Тепло проходит от активной области кремния через конструкцию корпуса, тепловые интерфейсы и основание cold plate к жидкости. Внутренние каналы увеличивают площадь контакта с потоком. Пластина не является холодильником: она передаёт энергию теплоносителю, который должен унести её дальше. Если внешний контур перестал отводить тепло, циркуляция внутри сервера лишь перераспределит растущую температуру.
Нужно различать температуру перехода полупроводника, крышки корпуса, основания пластины и теплоносителя. Между ними существуют перепады. У двух процессоров при одинаковой воде температура кристалла может отличаться из-за мощности, распределения горячих областей, конструкции корпуса или качества теплового контакта. Поэтому показание датчика на коллекторе не заменяет данные внутренних датчиков и пределы изготовителя процессора.
Прямое охлаждение также не означает погружение платы в жидкость. В рассматриваемой системе теплоноситель находится в герметичном тракте, а окружающие компоненты могут продолжать охлаждаться воздухом. Иммерсия и двухфазные cold plate используют другие конструктивные и термодинамические модели. Формулу нагрева однофазного потока нельзя без изменения применять к тракту, где значительная доля энергии расходуется на испарение.
2. Два контура соединены теплом, а не обязательно общей водой
В типичной конструкции технологический контур TCS обслуживает серверы, а контур здания FWS принимает тепло через теплообменник CDU. Жидкости остаются по разные стороны стенок. Это позволяет согласовать разные давление, чистоту и химический состав. Однако разделение не отменяет тепловой зависимости: слишком тёплый внешний поток уменьшает способность CDU охлаждать внутреннюю подачу.
Термины «первичный» и «вторичный» иногда используются относительно разного оборудования. На схеме полезнее подписать назначение каждого потока и направление, чем рассчитывать на привычное название. В техническом документе должны быть явно указаны вход и выход каждой стороны, теплоноситель, расход, допустимые давления и точка измерения температуры. Иначе одинаковые числа могут относиться к разным границам.
Описание действующей инфраструктуры HPC национальной лаборатории показывает CDU между IT и общим охлаждением, остаточный воздушный тракт и несколько вариантов дальнейшего отвода тепла. Это конкретная реализация, а не обязательная схема любого центра обработки данных. Встречаются также жидкостно-воздушные CDU: они отдают энергию воздуху помещения и сохраняют нагрузку на его охлаждение.
Разделительный теплообменник также создаёт собственную границу диагностики. Если внутренний поток нагревается, нужно проверить одновременно, принимает ли внешняя сторона расчётную мощность и достаточно ли внутренней циркуляции. Смена насоса внутри стойки не исправит нехватку охлаждения здания. Согласованные данные обеих сторон позволяют избежать ремонта исправного оборудования из-за ошибки на другой половине маршрута.
3. Тепловой баланс связывает мощность, расход и нагрев
Для установившегося однофазного потока используем Q = ṁcₚΔT. Здесь Q — передаваемая тепловая мощность, ṁ — массовый расход, cₚ — удельная теплоёмкость, ΔT — разность температур выхода и входа. Предполагаются отсутствие существенных потерь на стороне измерения и подходящая оценка свойств жидкости. Формула описывает перенос энергии потоком, а не температуру самой горячей точки процессора.
Зададим воду с плотностью 1000 кг/м³ и теплоёмкостью 4180 Дж/(кг·К), считая свойства постоянными. Для 100 кВт и нагрева на 10 К нужно 100000/(4180×10) ≈ 2,392 кг/с. Это около 143,54 л/мин. При том же тепле и нагреве на 5 К потребуется примерно 287,08 л/мин. Уменьшение перепада вдвое удваивает необходимый расход именно в этой модели.
У раствора с другой плотностью и теплоёмкостью результат изменится. Температурная зависимость свойств тоже может быть существенна. Если в паспорте задан объёмный расход, переход к массовому требует плотности выбранной жидкости. Нельзя подставить литры в секунду вместо килограммов в секунду и считать полученное число универсальным для воды, гликолевой смеси и любого диэлектрического теплоносителя.
4. Доля тепла в жидкости отличается от мощности всей стойки
Если стойка потребляет 100 кВт и 85% тепла захватывается жидкостным трактом, в него поступает 85 кВт, а около 15 кВт остаётся воздушной системе при выбранной границе. Для нагрева воды на 10 К жидкостному пути нужно примерно 122,01 л/мин. Подстановка всех 100 кВт дала бы другой расчёт. Важно назвать, какая часть нагрузки действительно подключена к cold plate.
Остаточный воздух может охлаждать память, преобразователи питания, накопители, оптические модули и другие узлы. Их температура зависит от собственного потока и компоновки. Замена охлаждения CPU не доказывает допустимости остановки всех вентиляторов сервера. Доля захвата относится к конкретной конструкции и меняется вместе с нагрузкой: процессорный и сетевой тесты распределяют потребление по разным компонентам.
Даже практически полностью жидкостная стойка нуждается в учёте тепла инфраструктуры. Электроника насосов, источники питания и соседние системы могут отдавать часть энергии в помещение. Для баланса центра важно провести замкнутую границу, не потеряв эти вклады и не посчитав их дважды. Высокий процент жидкостного захвата является полезным параметром, но не полным описанием HVAC здания.
5. Cold plate имеет одновременно тепловую и гидравлическую характеристику
При выборе тепловой нагрузки полезно различать среднее потребление и кратковременный пик. Система с большой тепловой инерцией способна сгладить часть изменений, однако ограничения локального контакта проявляются раньше нагрева большого объёма. Поэтому одинаковые средние ватты за минуту ещё не гарантируют одинаковую максимальную температуру при разном распределении вычислительной активности внутри корпуса.
Увеличение расхода обычно улучшает теплообмен, но величина улучшения зависит от геометрии и режима течения. Тепловая характеристика должна сопровождаться мощностью, температурой жидкости, её составом и определением измеряемой температуры. Например, сопротивление между крышкой корпуса и средним потоком нельзя напрямую сравнивать с сопротивлением от кристалла к входной жидкости: в них включены разные участки.
В учебном приближении зададим эффективное сопротивление от выбранной точки корпуса к среднему теплоносителю 0,025 К/Вт. При 800 Вт соответствующий перепад равен 20 К. Если жидкость входит при 35 °C и выходит при 45 °C, условная средняя температура 40 °C даёт 60 °C в выбранной точке. Температура перехода кристалла потребует отдельного участка модели.
Заменить среднюю жидкость входной и получить 55 °C было бы изменением определения, а не улучшением охлаждения. Реальная пластина имеет распределение температуры и потока; арифметическое среднее здесь введено только для объяснения. Для проектирования используют характеристику изготовителя либо проверенную модель с нужной картой тепловыделения, прижимом и тепловым интерфейсом. Один коэффициент не переносится автоматически между корпусами.
6. Увеличение расхода приходится оплачивать давлением
Насос должен преодолеть сопротивление каналов, шлангов, фильтров, соединителей и теплообменника. Рабочая точка возникает на пересечении характеристики насоса и системы. Указанный максимальный расход насоса при почти нулевом сопротивлении не является потоком через собранную стойку. Аналогично максимальный напор при закрытом выходе не означает возможность одновременно получить паспортный максимальный расход.
Для иллюстрации зададим участок, где перепад давления приближённо пропорционален квадрату объёмного расхода. При 100 л/мин он составляет 80 кПа. Увеличение расхода до 150 л/мин потребует 180 кПа, то есть в 2,25 раза больше. Это выбранная зависимость для участка, а не универсальный закон всех микроканалов. В ламинарных режимах и сложных сетях отношение может быть иным.
Гидравлический расчёт также должен различать избыточное, абсолютное и дифференциальное давление. Предел прочности компонента и доступный перепад для проталкивания потока отвечают на разные вопросы. Из показания одного манометра нельзя восстановить весь маршрут. Нужны точки по обе стороны значимых элементов и согласованная система отсчёта, особенно при сравнении измерений на разных высотах и в переходных состояниях.
7. Мощность насоса растёт быстрее полезного потока
Гидравлическая мощность равна Δp·V̇, где объёмный расход выражен в кубических метрах в секунду. Электрическая мощность больше на потери двигателя и насоса. Для предыдущих 100 л/мин и 80 кПа получается 133,33 Вт гидравлически. При условном общем КПД 50% электрический вход составляет 266,67 Вт. КПД задан, а не взят из паспорта устройства.
Для 150 л/мин при 180 кПа гидравлическая мощность уже 450 Вт, электрическая — 900 Вт при том же КПД. Рост потока в полтора раза дал рост мощности в 3,375 раза. Кубическая зависимость получилась из выбранной квадратичной характеристики сопротивления и постоянного КПД. Это объясняет цену избыточного расхода, сохраняя ограничения модели.
Не вся электрическая энергия обязательно поступает в одну и ту же измеряемую жидкость. Часть потерь двигателя может уходить в воздух, а гидравлическая работа в конечном счёте рассеивается. Для строгого баланса нужно знать расположение насоса относительно датчиков и выбранной тепловой границы. Малый расход тоже не гарантирует экономичности, если он вынуждает снижать производительность вычислений или температуру внешнего контура.
8. Параллельные ветви делят давление, а не обязаны делить расход поровну
В коллекторе несколько серверных ветвей соединены параллельно. При одинаковом перепаде их потоки зависят от собственного сопротивления. В учебной модели Δp=K·V̇² ветвь с вчетверо большим K получает вдвое меньший расход. Совпадение внешнего вида шлангов не доказывает одинаковую гидравлику: внутри различаются пластины, соединители, длины и состояние проходов.
При добавлении или отключении сервера меняется характеристика сети. Управление общим насосом и балансирование должны сохранять допустимые режимы остальных ветвей. Датчик общего расхода способен показывать достаточную сумму, пока одна ветвь недополучает поток. Для приёмки полезны предусмотренные измерения распределения и температуры отдельных потребителей при разных сочетаниях нагрузки и подключённых устройств.
Последовательное соединение создаёт другой компромисс: тот же поток проходит через несколько элементов, но каждый следующий получает более нагретую жидкость, а перепады давления складываются. Нельзя взять преимущество малого общего расхода из последовательной схемы и одновременно предположить одинаково холодную подачу каждой пластине. Выбор соединений всегда связан с распределением температуры, допустимым давлением и обслуживанием.
9. CDU переносит тепло через конечный температурный напор
Гидравлическая симметрия важна и для сравнения нескольких стоек. Если ближняя к CDU стойка подключена коротким широким маршрутом, а дальняя — более сопротивляющимся, одинаковые управляющие сигналы не обеспечат одинаковые условия. Нужна проверка всей разводки при согласованном составе потребителей. Проектная сумма расходов по таблице не является наблюдением их реального распределения.
Теплообменник требует разности температур. В противоточной схеме холодный вход внешнего контура встречается с охлаждённым выходом внутреннего, а горячие концы образуют другую пару. Малое значение approach означает малое сближение температур в определённом конце; оно должно сопровождаться точным определением. Это не разность входа и выхода одной и той же жидкости.
Зададим внутренний поток 40→50 °C, внешний 30→40 °C и 100 кВт передачи. Разности между соответствующими концами равны 10 К, поэтому логарифмический средний температурный напор также 10 К. Требуемое произведение общей теплопередачи на площадь UA в идеализированной модели равно 10 кВт/К. Это характеристика выбранной рабочей точки, без оценки загрязнения и потерь.
Если внешний контур потеплеет, прежняя мощность не гарантируется при неизменных остальных условиях. Нужны новая рабочая точка, расход или температура внутреннего потока. Именно поэтому заявление «CDU на один мегаватт» неполно без условий обеих сторон. Предел насоса, максимальная теплопередача и температурная точность регулятора являются разными характеристиками устройства.
10. Температурный класс не заменяет договор между сервером и зданием
У теплообменника есть и ограничения регулирования при малой нагрузке. Очень небольшой запрос тепла не равен отсутствию требований к стабильности подачи. Неподходящие диапазоны клапанов или насоса способны вызвать колебания, хотя максимальная мощность устройства велика. Поэтому карта работоспособности должна включать минимальный режим, а не только самую тяжёлую расчётную точку.
ASHRAE в документе 2021 года объясняет названия W17, W27, W32, W40, W45 и W+: число связывается с верхней температурой подачи соответствующего класса. Это классификация условий, а не предписание поставить каждому серверу одинаковую температуру. Допустимость определяется оборудованием и полной областью его заявленной работы.
Руководство ASHRAE отдельно требует учитывать approach CDU. Температуру внешней воды нельзя автоматически принять за температуру подачи непосредственно к серверу. Если последний требует более холодный поток, чем способен обеспечить теплообменник при имеющемся здании, совпадение общей мощности оборудования не решает несовместимость.
При чтении документов фиксируют сторону подключения, расход, рабочую жидкость, допустимую температуру и условия сохранения полной производительности. Способность компонента ненадолго пережить высокую температуру отличается от работы без ограничения мощности. Для многопоставочной стойки нужен общий совместимый диапазон. Самый терпимый сервер не расширяет пределы соседнего, подключённого к той же подаче.
11. Точка росы относится к местному воздуху и холодной поверхности
Конденсация возможна, когда поверхность становится холоднее точки росы окружающего воздуха. Важна именно температура поверхности: участок металлического соединителя, шланг и корпус могут иметь разное состояние. Значение воздуха на другом конце зала не обязательно описывает местную влажность. Также при открывании дверей или изменении вентиляции точка росы способна изменяться быстрее установившегося режима жидкости.
В учебной ситуации местная точка росы равна 18 °C. Поверхность 16 °C находится ниже неё, а поверхность 22 °C имеет температурный запас 4 К. Это только сравнение, без назначения допустимого запаса проекту. Погрешности датчиков, неоднородность и переходные процессы требуют отдельного обоснования. Тёплая средняя обратка не доказывает отсутствия холодного участка на подаче.
White paper ASHRAE о водяных серверах рассматривает контроль нижней границы TCS и предотвращение конденсации как функцию конструкции CDU. Его конкретные рекомендации имеют контекст документа. Поднимать температуру без проверки верхнего теплового предела тоже нельзя: автоматика должна одновременно удовлетворять условиям помещения и потребителей.
12. Химическая совместимость охватывает весь смоченный тракт
Жидкость соприкасается не только с медью пластины. В тракт входят сплавы, покрытия, уплотнения, шланги, насос и теплообменник. Подходящий состав для одного металла может оказаться неподходящим для другого материала. Электропроводность не является единственным критерием: важны устойчивость состава, коррозия, образование осадка и состояние эластомеров при рабочей температуре.
Рекомендации OCP по водным теплоносителям связывают спецификацию жидкости со списком смоченных материалов и предполагают согласование участников проекта. Изменение одного соединителя способно потребовать повторной оценки совместимости. Чистая вода из случайного источника не становится подходящим готовым теплоносителем по одному низкому показанию проводимости.
Здесь важны исходный анализ и изменение во времени. Рост примесей либо появление продуктов коррозии сообщает больше, если известна начальная точка. При этом статья не задаёт рецептуру присадок: требуемый состав определяется подтверждённой системой. Даже небольшое самовольное добавление вещества может изменить свойства, вывести уплотнения за условия проверки и затруднить диагностику последующей неисправности.
13. Частицы и газ меняют поток раньше явного отказа
Узкие каналы чувствительны к загрязнению. Фильтрация помогает, но фильтр сам создаёт сопротивление и постепенно меняет его при накоплении частиц. Повышение перепада через фильтр при сопоставимом расходе является одним наблюдаемым признаком. Единственное значение температуры не позволяет отличить этот случай от ухудшения теплового контакта или изменения мощности процессора.
Газовые включения и непрокачиваемые области способны нарушать распределение потока и работу насосов. Геометрия тракта влияет на места их накопления. Заполненный резервуар не подтверждает отсутствие газа во всех ветвях. Проектные процедуры подготовки и обслуживания поэтому являются частью квалификации системы, а не необязательным дополнением к покупке достаточно большого насоса.
Диагностика строится на согласованных наблюдениях: мощность, расход, перепад давления, температуры и состояние жидкости. При изменении одного параметра остальные помогают сузить причину. Тренд обычно содержательнее случайного снимка, однако сравнивать нужно одинаковые режимы. Рост перепада при росте заданного расхода может быть нормальной гидравликой, а не доказательством засорения.
14. Соединитель является обслуживаемой границей системы
Быстроразъёмное соединение должно обеспечивать подходящие проход, герметичность, материалы и ресурс соединений. Blind mate добавляет требования к направлению, допускам и механике установки сервера. Унифицированная геометрия помогает совместимости, но не делает любую внешне похожую пару проверенной при всех температурах и давлениях. Важны версия спецификации и квалификация конкретных компонентов.
Проект OCP Cold Plate охватывает пластины, трубки, коллекторы, разъёмы и CDU. Наличие отдельных рабочих направлений показывает масштаб интеграции. На странице одновременно встречаются опубликованные материалы и проекты новых ревизий; статус черновика нужно сохранять, а не выдавать его за действующий обязательный стандарт для всей индустрии.
Обнаружение утечки и действие после неё также различаются. Датчик сообщает о состоянии, а стратегия определяет локализацию, прекращение подачи и реакцию вычислительной нагрузки. Необходимо проверить сценарий целиком, включая ложные сигналы и отказ самого наблюдения. Название «защита от утечек» не раскрывает, какая часть оборудования останется доступной после предусмотренного вмешательства автоматики.
15. Резервирование проверяют в режиме отказа
Два насоса не означают автоматически удвоенную доступность. Они могут делить питание, контроллер, теплообменник или общий участок труб. При потере одного элемента оставшиеся должны обеспечивать допустимую рабочую точку, а переход не должен выходить за тепловые и гидравлические пределы. Резервное устройство, которое запускается слишком поздно, не решает кратковременный перегрев.
Учебный полностью перемешанный объём 20 л воды при постоянных свойствах имеет теплоёмкость 83600 Дж/К. Если он временно принимает дополнительные 100 кВт без отвода, средняя температура растёт примерно на 1,196 К/с. На 5 К потребуется около 4,18 с. Это грубая оценка запаса жидкости, а не гарантированное время выживания сервера: локальный кристалл может нагреться быстрее.
Управление должно согласовывать ограничения вычислений, насосов и внешней инфраструктуры. Полезная проверка включает потерю электрического питания одного узла, недоступность внешнего отвода и неисправность датчика. Такие сценарии проектируются и испытываются по документации системы. Их нельзя заменить предположением, что большой объём жидкости всегда сгладит любой перерыв без изменения производительности.
16. Повторное использование тепла зависит от его температуры
Сто киловатт при 45 °C и те же сто киловатт при более высокой температуре имеют одинаковую тепловую мощность, но разную пригодность потребителю. Для отопления или технологического процесса нужны подходящие температурный график, сезонный спрос и теплообменники. Иногда требуется тепловой насос, который добавляет электрическую работу и меняет общий энергетический баланс.
Замкнутый серверный контур также не означает нулевое потребление воды всей площадкой. Конечный отвод может использовать испарительную градирню, сухой охладитель либо сочетание режимов. Объём теплоносителя в стойке и расход воды на охлаждение здания относятся к разным границам. Улучшение одного показателя нельзя автоматически переносить на другой без схемы и фактических условий климата.
В оценке экономичности отдельно считают энергию насосов, вентиляторов, холодильных машин и полезную вычислительную работу. Более тёплая подача способна облегчить внешний отвод, но уменьшает запас охлаждения чипа. Правильная рабочая точка находится для всей системы. Отдельный выигрыш CDU не доказывает пропорционального изменения PUE, расхода воды или стоимости завершённого вычисления.
17. Паспортная мощность CDU требует условий и стадии подтверждения
Методика OCP для жидкостно-жидкостных CDU посвящена испытаниям и представлению характеристик. Смысл такой оценки — сравнивать одинаково определённые режимы. Для проекта нужны тепловая мощность, температуры и расходы обеих сторон, доступный напор, электрическое потребление и состав жидкости, а также пределы работы при резервировании.
22 сентября 2026 года LG сообщила о квалификации CDU 2,6 МВт как NVIDIA DSX Ready. Это объявленный статус конкретного оборудования и требований платформы. Он не является независимым испытанием владельца сайта и не доказывает возможность получить эту мощность при произвольных температурах любого здания.
Публикация спецификации, показ на выставке, квалификация и эксплуатация у заказчика отвечают на разные вопросы. Перед сравнением сохраняют дату и точную формулировку результата. Особенно полезна доступная карта рабочих точек: она позволяет увидеть, что произойдёт в жаркий день, после добавления стоек и при отключении резервного элемента, вместо выбора только по самому крупному числу в названии.
18. Что составляет доказательство работающего охлаждения
Приёмка связывает тепловой и гидравлический балансы с реальной нагрузкой. Проверяют, какая мощность поступает в жидкость, где измерены расход и температуры, какие поправки внесены и какова неопределённость. Рассогласование баланса может показывать потерянный тепловой путь, неправильную оценку свойств или смещение датчиков. Его следует объяснить до вывода о необычной эффективности оборудования.
Затем проверяют распределение по потребителям, устойчивые температуры, переходы нагрузки и отказные состояния. Сохранение допустимой средней подачи ещё не подтверждает отсутствие горячего кристалла. Важны журнал событий, состояние жидкости и воспроизводимость после обслуживания. Эти данные позволяют отличить достаточную инфраструктуру от конструкции, которая проходит короткую демонстрацию только в удобных условиях.
Cold plate, CDU и насос полезно рассматривать как части единого маршрута энергии. Температура определяет тепловой запас, расход переносит мощность, давление обеспечивает этот расход, а автоматика сохраняет допустимое сочетание во времени. Работающий результат — подтверждённый режим вычислительной системы с известными ограничениями. Именно такую характеристику стоит искать за словами «жидкостное охлаждение».
Неопределённость измерений особенно заметна при малом нагреве воды. Если каждый температурный канал имеет некоторую погрешность, их разность может иметь значительную относительную ошибку. Поэтому красивый тепловой баланс при небольшой ΔT требует подходящей измерительной схемы и согласованных датчиков. Излишняя точность в записанных десятичных знаках не уменьшает эту физическую неопределённость.
Первичные источники
Физические модели сопоставлены с материалами ASHRAE о водяных серверах, расширении жидкостного охлаждения и инфраструктуре datacom. Для состава тракта и квалификации использованы открытые документы OCP о водных теплоносителях, Cold Plate и испытаниях CDU. Пример действующей площадки дан по описанию национальной лаборатории, а статус конкретного оборудования 2026 года — по сообщению LG. Точные ссылки приведены рядом с соответствующими утверждениями.