Промышленный узел CDU с ультразвуковыми расходомерами, датчиками дифференциального давления и контуром контроля точки росы в машзале ЦОД

RICEWIND / Отраслевой обзор

Метрология жидкостного охлаждения и динамическая инструментация CDU в гиперскейлерах ИИ: Руководство 2026 года

Переход гиперскейлеров на стойки искусственного интеллекта мощностью 80–150 кВт и выше с прямым жидкостным охлаждением кристаллов Direct-to-Chip фундаментально трансформирует парадигму инженерной телеметрии современных центров обработки данных. Классический мониторинг макроклимата машзала уступает место связанной двухсредной метрологии, синхронизирующей гидродинамические параметры первичных и вторичных контуров с локальными термодинамическими микроклиматами вычислительных стоек. В настоящем руководстве института RICEWIND детально анализируются архитектурные требования к динамической инструментации распределительных узлов охлаждения (CDU) в соответствии со спецификациями OCP ACF 2.0 и нормативами ASHRAE TC 9.9. Рассматриваются субсекундная регистрация переходных тепловых процессов при контрольных точках обучения нейросетей, прецизионная ультразвуковая расходометрия, динамический контроль температурного запаса точки росы (+2,0 °C) для гарантированного исключения конденсации, а также непрерывный химический онлайн-анализ деградации теплоносителей PG25. Особое внимание уделено отказоустойчивой топологии мажоритарного голосования 2oo3 и интеграции высокочастотной телеметрии в системы DCIM по протоколам OPC UA и gRPC.

ОпубликованоАвтор: RICEWIND Infrastructure Research Institute

Архитектурный сдвиг: переход от воздушной среды к связанной двухсредной метрологии

Традиционная эксплуатация центров обработки данных опиралась на контроль воздушной среды: измерение температуры сухого термометра, относительной влажности и статического дифференциального давления между коридорами. Появление вычислительных кластеров машинного обучения высокой плотности с энергопотреблением от 80 до 150 кВт и выше на стойку сделало воздушный теплосъем вторичным. Внедрение прямого жидкостного охлаждения кристаллов (Direct-to-Chip, D2C) требует непрерывного сопряженного мониторинга двух взаимосвязанных сред — гидравлического тракта первичного и вторичного контуров и микроклиматического воздушного конверта внутри шасси.

Специфика рабочих нагрузок ИИ, таких как сохранение промежуточных весов (checkpointing) при обучении больших языковых моделей и пакетная инференс-активность переменной интенсивности, порождает мгновенные тепловые скачки длительностью в доли секунды. Переход процессора из состояния холостого хода в пиковое потребление происходит практически безынерционно, вызывая резкие градиенты температуры кристалла и скорости тепловыделения. В этих условиях классические ПИД-регуляторы с запаздыванием обратной связи приводят к локальным перегревам или гидравлическим ударам; современная инструментализация CDU требует субсекундной частоты дискретизации сенсоров и алгоритмов упреждающего управления (feed-forward) на базе цифровых моделей теплообмена.

  • Синхронизация выборок первичного и вторичного гидроконтуров с шагом опроса не более 100 мс.

  • Реализация предиктивных алгоритмов прямого управления (feed-forward) при переходных процессах инференса и чекпоинтинга.

Критическая гидравлическая метрология: динамика давления, ультразвуковой учет и дельта-T

Предотвращение кавитации на крыльчатках циркуляционных насосов CDU и исключение воздушных пробок в микроканальных структурах холодных плит требуют высокоточного измерения перепада давления (dP). Пьезорезистивные преобразователи дифференциального давления промышленного класса, установленные на пластинчатых теплообменниках и гребенках распределительных коллекторов стойки, должны непрерывно контролировать положительную высоту столба жидкости на всасывании (NPSH). Резкие флуктуации dP служат первичным индикатором зарождающейся кавитации, которая способна разрушить микрорельеф каналов охлаждения или вызвать эрозию уплотнений за сотни часов наработки.

Измерение объемного расхода теплоносителя реализуется посредством накладных или проточных ультразвуковых время-импульсных расходомеров с точностью измерения не хуже плюс-минус 0,5%. Эти датчики интегрируются в контур калориметрического расчета снимаемой тепловой мощности в реальном времени по уравнению теплового баланса Q = m * Cp * (T_return - T_supply). В рамках температурных классов ASHRAE W3 и W4 подача теплоносителя осуществляется при температурах от 30 °C до 45 °C, что обеспечивает максимальное число часов круглогодичного фрикулинга без включения компрессоров чиллеров. При этом поддержание расчетного перепада температур (delta-T от 8 °C до 12 °C) гарантирует удержание температуры полупроводниковых переходов Tj строго ниже критического порога 85 °C.

  • Поддержание избыточного давления NPSH с контролем перепада давления через пьезорезистивные датчики с точностью не ниже плюс-минус 0,1% шкалы.

  • Применение время-импульсных ультразвуковых расходомеров с погрешностью до плюс-минус 0,5% для непрерывного сведения калориметрического баланса.

Динамика точки росы и превентивные алгоритмы предотвращения конденсации

Эксплуатация жидкостного охлаждения в машзалах сопряжена с фундаментальным термодинамическим риском: если температура поверхностей распределительных трубопроводов или узлов ввода хладагента падает ниже локальной температуры точки росы окружающего воздуха, на металле мгновенно образуется конденсат. В условиях высокоплотного монтажа вычислительных плат выпадение даже микроскопических капель влаги приводит к поверхностным утечкам тока, электрохимической миграции металлов и катастрофическому диэлектрическому пробою силовых шин питания ускорителей.

Для гарантированного исключения фазового перехода влаги внедряется строгий динамический защитный барьер: температура вторичного теплоносителя на входе в стойку должна превышать текущую точку росы воздуха в холодном коридоре минимум на 2,0 °C (3,6 °F). Метрологическое обеспечение этой защиты строится на базе емкостных тонкопленочных полимерных датчиков точки росы, монтируемых непосредственно в зонах входа хладагента в серверные шкафы. Управляющая автоматика CDU использует регулирующие трехходовые смесительные клапаны с электроприводами, динамически подмешивая нагретый теплоноситель из обратной линии при сезонных колебаниях наружного воздуха и резких сдвигах температуры технологической воды (FWT) на экономайзерах.

  • Непрерывный расчет динамического буфера безопасности: разница температур подачи хладагента и точки росы не менее 2,0 °C в каждой точке распределения.

  • Использование трехходовых смесительных клапанов с временем полного хода до 3–5 секунд для парирования резких температурных провалов технологической воды.

Физико-химический мониторинг теплоносителя и векторы деградации замкнутых систем

Долговечность замкнутых контуров на базе водно-гликолевых смесей (в частности, 25% раствора пропиленгликоля в деионизированной воде — PG25) или однофазных диэлектрических жидкостей лимитируется процессами химической деградации. Термический крекинг гликоля под воздействием локальных перегревов на микроканалах кристаллов ведет к образованию органических кислот (гликолевой, муравьиной, щавелевой), что вызывает лавинообразное падение pH и разрушение пассивирующих пленок на медных и алюминиевых теплообменных поверхностях. Дополнительными векторами риска выступают микробиологическое обрастание и истощение пакетов ингибиторов коррозии.

Предотвращение деструкции оборудования требует поточного физико-химического анализа в режиме реального времени. Вторичный контур оснащается кондуктометрическими датчиками для отслеживания удельной электрической проводимости деионизированной среды, превышение которой порога 10 мкСм/см свидетельствует об ионном загрязнении или активной коррозии. Оптические проточные турбидиметры и счетчики микрочастиц выявляют взвешенные частицы размером менее 100 мкм, генерируемые механическим износом уплотнений или гальваническими процессами, задолго до блокировки микроканалов охлаждения. Оптоэлектронные рефрактометры фиксируют показатель преломления для стабилизации концентрации гликоля, а pH-зонды удерживают водородный показатель в нейтрально-щелочном коридоре от 7,5 до 9,0.

  • Пороговое ограничение удельной электрической проводимости теплоносителя на уровне не более 10 мкСм/см.

  • Онлайн-спектрофотометрия и рефрактометрия для непрерывного контроля концентрации ингибиторов и индекса преломления водно-гликолевого раствора.

Топология сенсорных сетей, мажоритарное резервирование 2oo3 и интеграция в DCIM

Критичность ИИ-инфраструктуры стоимостью в десятки миллионов долларов за кластер исключает возможность доверия единичным датчикам при принятии решений об аварийном останове или изоляции гидроконтура. В зонах повышенного риска — вокруг быстроразъемных соединений (Quick-Disconnect, QD) с технологией сухого разъема (blind-mate), серверов и коллекторов — развертывается сенсорная сеть с логикой голосования два из трех (2oo3). Резервированные ультразвуковые сенсоры расхода и чувствительные кабельные детекторы жидкостных утечек опрашиваются параллельными контроллерами, что сводит к нулю вероятность как ложных аварийных отключений вычислительной нагрузки, так и пропуска реальных инцидентов.

Локальное размещение датчиков температуры поверхности непосредственно на металлических корпусах штуцеров QD и распределительных рейках позволяет выявлять зоны локального застоя воздуха и микроконденсации. Вся собираемая метрологическая информация транслируется по детерминированным полевым шинам и протоколам нового поколения: от классических Modbus RTU/RS-485 и BACnet/IP до высокоскоростных защищенных шин OPC UA и gRPC. Передача телеметрии с субсекундной периодичностью в платформы DCIM и нейросетевые оптимизаторы управления холодоснабжением замыкает контур автоматического регулирования теплового баланса ЦОД.

  • Внедрение отказоустойчивой схемы мажоритарной логики 2oo3 (два из трех) для сенсоров протечки и критических расходомеров.

  • Интеграция высокочастотной телеметрии CDU в контуры DCIM через интерфейсы OPC UA и потоковые буферы gRPC.

Поставки оборудования и техническая поддержка

Для получения технической документации, расчета энергетической топологии и оптовых заказов свяжитесь со специалистами HEFENGQI.