Чиллер для ЦОД: расчёт нагрузки, фрикулинг, резервирование и интеграция с DCIM

В офисном здании чиллер работает 1500–2500 часов в год — в жаркий сезон. Зимой он стоит. В ЦОД серверы выделяют тепло круглосуточно и круглогодично — чиллер работает 8760 часов в год без плановых остановов. Это меняет всё: требования к ресурсу компрессора, к схеме резервирования, к управлению и мониторингу.

Второе принципиальное отличие — недопустимость перегрева. В офисе температура воздуха +30 °С вместо +22 °С создаёт дискомфорт. В серверной +35 °С на входе в стойку вызывает аварийное отключение серверов через тепловые защиты. Время между остановом охлаждения и перегревом оборудования в плотном ЦОД — 5–15 минут при нагрузке стойки 10–15 кВт. Это диктует требования к резервированию, объёму буферного бака и времени автоматического переключения на резерв.

Проектирование чиллерной начинается с тепловой нагрузки. Типичные значения тепловыделения серверного оборудования сегодня:

• Стандартные стойки: 5–10 кВт на стойку (традиционные серверы, СХД, коммутаторы)
• Высокоплотные стойки: 20–40 кВт на стойку (GPU-кластеры, HPC)
• AI/ML инфраструктура: 50–100 кВт и выше на стойку

Критический момент проектирования: нагрузка ЦОД растёт в процессе эксплуатации. Здание, введённое с 50 стойками по 5 кВт (250 кВт суммарно), через 3 года может содержать те же 50 стоек по 20 кВт (1000 кВт). Чиллерная, рассчитанная на 300 кВт, не справится. Проектирование под текущую нагрузку без резерва на рост — наиболее частая стратегическая ошибка при строительстве ЦОД.

Суммарная тепловая нагрузка на чиллер: мощность ИТ-оборудования + тепловыделение прецизионных кондиционеров (CRAC/CRAH, обычно 5–8% от ИТ-нагрузки) + теплопотери через ограждающие конструкции (обычно незначительны для внутренних помещений).

Схема чиллер + CRAC (Computer Room Air Conditioner) — наиболее распространённая для ЦОД малой и средней плотности. Чиллер охлаждает теплоноситель, CRAC-блоки располагаются в серверном зале, охлаждают воздух и подают холодный воздух в холодный коридор. Граница применения по нагрузке стойки: до 10–12 кВт. При большей плотности воздушные потоки неэффективны — горячий и холодный воздух смешиваются до того, как холодный доходит до оборудования.

Схема чиллер + CRAH (Computer Room Air Handler) — CRAH использует только водяной теплообменник без компрессора. Вся холодопроизводительность генерируется централизованным чиллером. Более энергоэффективна, чем CRAC, при правильной гидравлике — один чиллер обслуживает несколько CRAH-блоков. Требует более точного регулирования температуры теплоносителя: при температуре воды +7/+12 °С можно поддерживать +18…+22 °С на входе в стойку при правильном разделении коридоров.

Задняя дверь (Rear Door Heat Exchanger) — теплообменник монтируется непосредственно на задней стенке стойки. Горячий воздух, выходящий из серверов, охлаждается при прохождении через теплообменник с холодной водой и выходит в зал уже охлаждённым. Применяется при нагрузке стойки 20–40 кВт. Температура теплоносителя: 14–18 °С (выше, чем для CRAH) — это снижает требования к чиллеру и увеличивает часы фрикулинга.

Жидкостное охлаждение процессоров (Direct Liquid Cooling, DLC) — прямая подача жидкости к теплоснимателям на CPU и GPU. Температура теплоносителя: 40–60 °С (тёплая вода). Чиллер в классическом понимании может не потребоваться — достаточно сухого охладителя. Применяется в AI/ML стойках с нагрузкой 50–100 кВт. Требует специализированного оборудования серверов и защиты от протечек в зале.

Московский климат исключительно благоприятен для фрикулинга. Температура наружного воздуха ниже +10 °С держится около 5000 часов в год — это 57% всего времени. При температуре теплоносителя +7/+12 °С переход в режим полного фрикулинга (компрессор отключён) возможен при температуре воздуха ниже +4…+6 °С — примерно 3500 часов в год.

Реальный расчёт экономии для ЦОД 500 кВт ИТ-нагрузки:

• Годовое потребление компрессоров чиллера без фрикулинга: ~1,2 млн кВт·ч
• При 3500 часах фрикулинга экономия: 40–50% от годового потребления компрессоров
• В деньгах при тарифе 8 руб./кВт·ч: 3,8–4,8 млн руб. в год

Чиллеры с встроенным фрикулинговым теплообменником (Aermec NRV-F, Carrier 30XAB-FC, Blue Box Tetris FC, Daikin EWAD-FC) позволяют реализовать фрикулинг без отдельного драйкулера и промежуточного гликолевого контура. При температуре теплоносителя 12/18 °С (повышенный температурный график) порог перехода в фрикулинг поднимается до +8…+10 °С — часы фрикулинга увеличиваются до 4500–5000 в год.

PUE (Power Usage Effectiveness) — отношение суммарного потребления ЦОД к потреблению ИТ-оборудования. Цель — приближение к 1,0. Типичные значения для московских ЦОД: без фрикулинга 1,6–1,8, с фрикулингом 1,3–1,5, с фрикулингом и высокотемпературным теплоносителем 1,2–1,35. Снижение PUE с 1,7 до 1,4 на объекте 1 МВт ИТ-нагрузки экономит 2,6 млн кВт·ч в год.

Уровни Tier определяют допустимое время недоступности ЦОД в год и задают требования к резервированию:

• Tier II — одиночный неизбыточный путь распределения. Допустимое время недоступности 22 часа в год. Для чиллерной: один рабочий агрегат, плановые остановы на ТО допустимы. Для небольших серверных комнат.
• Tier III — одновременно обслуживаемое оборудование, схема N+1. Допустимое время недоступности 1,6 часа в год. Чиллерная: минимум два агрегата, каждый на 50–70% суммарной нагрузки, резервный запускается автоматически при аварии рабочего. Плановое ТО выполняется без останова охлаждения — один агрегат обслуживается, второй несёт нагрузку.
• Tier IV — отказоустойчивое исполнение, схема 2N. Допустимое время недоступности 26 минут в год. Два полностью независимых комплекта оборудования, каждый на 100% нагрузки. Независимые источники питания, независимые трубопроводные трассы, независимые насосные группы. Любой компонент любого комплекта может выйти из строя или обслуживаться без влияния на работу ЦОД.

Объём буферного бака в ЦОД рассчитывается не только из условия защиты от short cycling, но и из условия поддержания температуры теплоносителя на допустимом уровне в течение времени автоматического переключения на резерв. При нагрузке 500 кВт и допустимом нагреве теплоносителя +2 °С за 60 секунд переключения необходимый объём бака превышает 7000 л — это стандартный ёмкостный показатель для ЦОД Tier III.

Стандартный температурный график чиллера для кондиционирования +7/+12 °С выбран исторически под традиционное офисное охлаждение. Для ЦОД он часто избыточно холодный — и это прямые потери:

При переходе с +7/+12 °С на +12/+18 °С (рекомендация ASHRAE для высокотемпературного охлаждения):

• COP чиллера растёт на 15–20% (выше температура испарения → ниже степень давления → меньше потребление)
• порог фрикулинга поднимается до +8…+10 °С вместо +4…+6 °С
• часы фрикулинга в Москве увеличиваются с 3500 до 4500–5000

Условие применения: CRAH-блоки должны обеспечивать нужную температуру в холодном коридоре при более высокой температуре теплоносителя. Это достигается увеличением расхода воды через CRAH или применением CRAH с большей поверхностью теплообменника. Стандарт ASHRAE 90.4 рекомендует температуру подачи воды к CRAH 18–21 °С для большинства климатических зон — московский климат полностью поддерживает эту рекомендацию.

Чиллер в ЦОД интегрируется в два уровня систем управления: BMS (Building Management System) — управление инженерными системами здания, и DCIM (Data Center Infrastructure Management) — управление инфраструктурой непосредственно ЦОД.

Протоколы интеграции с BMS: Modbus TCP/IP, BACnet/IP — стандарт для современных чиллеров. Через BMS чиллер получает команду на изменение уставки температуры (адаптивный SetPoint Reset: при снижении нагрузки ИТ-оборудования уставка автоматически повышается, снижая потребление чиллера).

Для DCIM дополнительно важны: SNMPv3-агент (для ИТ-систем мониторинга), REST API (современные агрегаты Blue Box, Stulz), передача в реальном времени: потребляемая мощность, холодопроизводительность, COP текущий, режим работы (компрессор / фрикулинг), прогноз времени следующего ТО. Эти данные напрямую используются DCIM для расчёта PUE в реальном времени.