Охлаждение ЦОД: методы, эффективность и будущее

В эпоху цифровых технологий центры обработки данных являются сердцем нашего взаимосвязанного мира, обеспечивая работу всего: от облачных вычислений и искусственного интеллекта до потоковых сервисов и умных городов. Однако эта огромная вычислительная мощность сопряжена с серьезной проблемой: выделением тепла. Современные процессоры, графические процессоры и кластеры высокопроизводительных вычислений (HPC) создают беспрецедентные тепловые нагрузки, которые, если ими не управлять должным образом, могут привести к сбою оборудования, нестабильности системы и дорогостоящим простоям. Фактически, на охлаждение может приходиться ошеломляющие 30–45 % общего энергопотребления центра обработки данных, что делает его критически важной областью как с точки зрения эксплуатационной эффективности, так и с точки зрения устойчивости.

В этой статье рассматривается увлекательная эволюция охлаждения центров обработки данных, а также исследуются стратегии, используемые для поддержания оптимальной работы этих жизненно важных цифровых инфраструктур. От традиционных подходов с воздушным охлаждением до передовых решений жидкостного охлаждения — мы рассмотрим, как центры обработки данных справляются с проблемой нагрева.

---

Основа: стратегии воздушного охлаждения

На протяжении десятилетий воздушное охлаждение было основой управления температурным режимом в центрах обработки данных. Хотя оптимизация воздушного потока в центре обработки данных кажется простой, она сама по себе является наукой.

Понимание основ воздушного охлаждения

• Установки CRAC (кондиционер для компьютерного зала) и CRAH (обработчик воздуха для компьютерного зала): Это основные рабочие лошадки воздушного охлаждения. Установки CRAC функционируют так же, как большие кондиционеры, используя систему на основе хладагента для охлаждения и осушения воздуха. Агрегаты CRAH, с другой стороны, используют охлажденную воду из внешней холодильной установки для охлаждения воздуха, что часто предпочтительнее на более крупных и энергоэффективных объектах. Оба типа забирают горячий воздух из центра обработки данных, охлаждают его и возвращают охлажденный воздух.

• Системы с фальшполом. Распространенная конструктивная особенность — фальшполы создают пространство под полом для распределения прохладного воздуха. Перфорированные плитки стратегически расположены под серверными стойками, позволяя кондиционированному воздуху подниматься непосредственно в воздухозаборники оборудования.

Оптимизация воздушного потока: изоляция проходов

Фундаментальный принцип эффективного воздушного охлаждения заключается в предотвращении смешивания горячего и холодного воздуха, обеспечивая подачу холодного воздуха непосредственно к оборудованию и эффективное удаление горячего отработанного воздуха.

• Конфигурация «горячий/холодный коридор»: Серверные стойки расположены чередующимися рядами. Холодные коридоры обращены к фасадам (воздухозаборникам) серверов и подают прохладный воздух. Горячие коридоры обращены к задней части (вытяжке) серверов и собирают горячий воздух.

• Ограничение прохода (горячий/холодный): для дальнейшего повышения эффективности используются физические барьеры (например, прозрачные панели или шторы), которые полностью ограждают либо горячий, либо холодный коридор. Это предотвращает смешивание потоков горячего и холодного воздуха, максимизируя эффективность охлаждающих устройств и сокращая потери энергии.

Ограничения традиционного воздушного охлаждения

Несмотря на широкое распространение, традиционное воздушное охлаждение сталкивается с серьезными проблемами, особенно в связи с растущей плотностью мощности современного ИТ-оборудования. Стойки с высокой плотностью размещения (например, в тех, в которых размещены ускорители искусственного интеллекта) могут создавать тепловые нагрузки, которые перегружают воздушные системы, что приводит к появлению локальных «горячих точек» и требует чрезмерного потребления энергии, особенно в более теплом климате.

---

Развитие воздушного охлаждения: эффективность и «бесплатные» методы

Чтобы выйти за рамки ограничений базового воздушного охлаждения, центры обработки данных внедрили более сложные методы управления воздушными потоками и методы «свободного охлаждения», которые используют условия окружающей среды.

Улучшенное управление воздушным потоком

• Заглушающие панели: эти простые, но эффективные панели заполняют неиспользуемые пространства внутри серверных стоек, предотвращая попадание холодного воздуха в обход оборудования и обеспечивая его направление туда, где это больше всего необходимо.

• Вычислительный анализ гидродинамики (CFD). Передовые инструменты моделирования используются для моделирования структуры воздушного потока в центре обработки данных, выявления горячих точек и оптимизации компоновки стоек, размещения CRAC/CRAH и конфигураций перфорированных плит для максимальной эффективности.

Экономайзеры (естественное охлаждение)

Экономайзеры используют охлаждающую силу природы, значительно снижая зависимость от механического охлаждения.

• Воздушные экономайзеры: в подходящих климатических условиях прохладный наружный воздух можно напрямую фильтровать и подавать в центр обработки данных для охлаждения оборудования. Альтернативно, экономайзеры непрямого воздушного потока используют теплообменники для передачи тепла от выхлопного воздуха центра обработки данных более прохладному наружному воздуху без смешивания двух воздушных потоков. Это особенно эффективно в регионах со стабильно низкой температурой окружающей среды.

• Преимущества: эти методы могут привести к существенной экономии энергии за счет сокращения времени работы энергоемких чиллеров и компрессоров.

Испарительное охлаждение (адиабатическое охлаждение)

Испарительное охлаждение использует естественный процесс испарения воды для снижения температуры воздуха.

• Механизм: Теплый наружный воздух втягивается через водонасыщенные подушки или системы распыления. Испаряясь, вода поглощает тепло из воздуха, в результате чего температура воздуха падает.

• Прямое и косвенное охлаждение. При прямом испарительном охлаждении охлажденный увлажненный воздух подается непосредственно в центр обработки данных. В непрямых системах используется теплообменник для передачи тепла от воздуха центра обработки данных к увлажненному наружному воздуху без смешивания.

• Плюсы: Высокая энергоэффективность, особенно в сухом климате.

• Минусы: требует значительного расхода воды, а его эффективность снижается в условиях повышенной влажности.

---

Развитие жидкостного охлаждения: укрощение тепла высокой плотности

Поскольку плотность мощности серверов продолжает расти, особенно с распространением искусственного интеллекта и высокопроизводительных вычислений, жидкостное охлаждение стало решающим решением. Вода и другие теплоносители обладают гораздо большей способностью поглощать и переносить тепло, чем воздух, что делает их идеальными для управления интенсивными тепловыми нагрузками.

Непосредственное охлаждение чипа (охлаждение холодной пластиной)

• Механизм: этот метод предполагает циркуляцию жидкого хладагента (часто воды или диэлектрической жидкости) через небольшие высокопроизводительные охлаждающие пластины, непосредственно установленные на самых горячих компонентах, таких как процессоры, графические процессоры и модули памяти. Тепло эффективно передается от чипа к холодной пластине, а затем к циркулирующей жидкости, которая его уносит.

• Преимущества: Высокоэффективное целенаправленное охлаждение, обеспечивающее гораздо более высокую плотность стоек, чем при воздушном охлаждении. Это радикально снижает потребность в традиционном кондиционировании воздуха внутри стойки.

Погружное охлаждение

Погружное охлаждение представляет собой смену парадигмы: все компоненты ИТ-оборудования погружаются непосредственно в специально разработанную непроводящую диэлектрическую жидкость.

• Однофазное погружение: серверы полностью погружаются в диэлектрическую жидкость, которая остается в жидкой фазе. Жидкость поглощает тепло, затем прокачивается через теплообменник (обычно жидкость-жидкость), охлаждается и рециркулируется обратно в резервуар.

• Двухфазное погружение. В этом высокоэффективном методе используется диэлектрическая жидкость с очень низкой температурой кипения. Поскольку жидкость поглощает тепло от погруженных в воду компонентов, она кипит, превращаясь в пар. Этот пар поднимается к змеевику конденсатора в верхней части резервуара, где охлаждается, снова конденсируется в жидкость и стекает вниз, продолжая цикл.

• Плюсы: обеспечивает сверхвысокую плотность размещения, исключительную эффективность охлаждения, значительно уменьшенное количество механических деталей (без серверных вентиляторов) и более тихую работу.

• Минусы: более высокие первоначальные инвестиции в резервуары и специальные жидкости, соображения по обслуживанию жидкостей и совместимость оборудования (хотя ситуация улучшается).

Охлаждение в ряду и в задней двери

Эти методы служат эффективным мостом между традиционным воздушным охлаждением и полностью жидкостным охлаждением, обеспечивая локализованный отвод тепла на основе жидкости.

• Внутрирядные охладители: эти охлаждающие устройства расположены непосредственно внутри рядов серверов, рядом со стойками. Они забирают горячий воздух непосредственно из горячего коридора, охлаждают его с помощью змеевиков с охлажденной водой и возвращают холодный воздух в холодный коридор. Это обеспечивает охлаждение ближе к источнику тепла.

• Теплообменники с задней дверцей (RDHx). Эти системы заменяют традиционные задние дверцы серверных стоек со змеевиками с жидкостным охлаждением. Горячий воздух, выходящий из серверов, проходит через эти змеевики, передавая свое тепло циркулирующей жидкости, а затем возвращает более холодный воздух в помещение или вытесняет его.

• Преимущества: Высокая эффективность управления стойками высокой плотности без необходимости капитального ремонта и полного погружения в жидкость, что повышает общую тепловую эффективность.

---

За пределами традиционных методов: инновации и комплексные подходы

Охлаждение центров обработки данных продолжает развиваться, что обусловлено требованиями повышения эффективности, снижения воздействия на окружающую среду и способности справляться с постоянно растущими вычислительными нагрузками.

Оптимизация эксплуатационных параметров

• Рекомендации ASHRAE по температуре: Отраслевые стандарты, в частности ASHRAE (Американское общество инженеров по отоплению, охлаждению и кондиционированию воздуха), все чаще позволяют центрам обработки данных работать при более высоких температурах окружающей среды. Этот, казалось бы, нелогичный подход может значительно снизить потребление энергии на охлаждение, не влияя при этом на надежность оборудования.

• Интеллектуальный мониторинг и охлаждение на основе искусственного интеллекта: передовые датчики, анализ данных и искусственный интеллект используются для мониторинга температурных условий в режиме реального времени. Алгоритмы искусственного интеллекта могут прогнозировать потребности в охлаждении, динамически регулировать параметры системы охлаждения (например, скорость вращения вентилятора, мощность охладителя) и оптимизировать использование энергии в зависимости от колебаний рабочей нагрузки.

Устойчивые и ориентированные на местоположение стратегии

• Геотермальное охлаждение. Некоторые центры обработки данных используют стабильную температуру земной коры, циркулируя жидкости через подземные теплообменники для отвода тепла.

• Водные центры обработки данных. Футуристический подход предполагает погружение целых центров обработки данных в большие водоемы (например, океаны или озера), используя естественную охлаждающую способность воды для рассеивания тепла.

• Повторное использование отработанного тепла. Вместо того, чтобы просто выбрасывать отработанное тепло в атмосферу, некоторые центры обработки данных восстанавливают и повторно используют его в полезных целях, таких как отопление близлежащих зданий, сети централизованного теплоснабжения или даже для сельскохозяйственных нужд (например, теплиц).

Гибридные решения для охлаждения

Многие современные центры обработки данных используют гибридные подходы, сочетая различные методы охлаждения для оптимизации эффективности при различных рабочих нагрузках и условиях окружающей среды. Например, воздушное охлаждение может использоваться для общих нагрузок, тогда как жидкостное охлаждение выборочно применяется к стойкам сверхвысокой плотности или конкретным кластерам HPC.

---

Ключевые факторы, влияющие на решения по охлаждению

Выбор правильной стратегии охлаждения для центра обработки данных — это сложное решение, на которое влияет множество факторов:

• Плотность мощности: это, пожалуй, самый важный фактор. По мере того, как плотность мощности стойки превышает 20–30 кВт на стойку, эффективность и возможности воздушного охлаждения быстро снижаются, что делает жидкостное охлаждение необходимым.

• Энергоэффективность и PUE (эффективность использования энергии): PUE — это показатель, который измеряет, насколько эффективно центр обработки данных использует энергию (общая энергия объекта / энергия ИТ-оборудования). Более низкий PUE (ближе к 1,0) указывает на большую энергоэффективность. Охлаждение напрямую влияет на PUE, а более эффективные методы охлаждения приводят к снижению показателей PUE и снижению эксплуатационных расходов.

• Эффективность использования воды (WUE). Для водоемких методов охлаждения, таких как испарительное охлаждение, WUE (общее потребление воды / энергия ИТ-оборудования) является важным показателем, особенно в регионах с дефицитом воды.

• Капитальные затраты (CapEx) и операционные расходы (OpEx). Баланс первоначальных инвестиций в инфраструктуру охлаждения (CapEx) с текущими эксплуатационными расходами (OpEx) жизненно важен для долгосрочной финансовой жизнеспособности.

• Масштабируемость и ориентированность на будущее. Выбранная система охлаждения должна быть масштабируемой, чтобы приспособиться к будущему росту спроса на ИТ и увеличению тепловых нагрузок.

• Цели устойчивого развития: экологические проблемы и корпоративные цели устойчивого развития все чаще приводят к принятию решений в пользу более энергоэффективных и низкоуглеродных решений для охлаждения.

---

Заключение

Развитие охлаждения центров обработки данных является свидетельством постоянных инноваций, обусловленных постоянно растущими требованиями цифрового мира. То, что началось с базового кондиционирования воздуха, превратилось в сложную экосистему высокоэффективных, часто интегрированных технологий охлаждения. Поскольку вычислительная мощность продолжает расти в геометрической прогрессии, доводя плотность тепла до новых пределов, важность эффективного управления температурным режимом будет только возрастать. Будущее охлаждения центров обработки данных указывает на более интеллектуальные, интегрированные и жидкостно-ориентированные решения, все из которых направлены на оптимизацию производительности, обеспечение надежности и обеспечение устойчивости.

В Winshare Thermal , мы являемся лидером в области управления температурным режимом высокой мощности , уделяя особое внимание передовым технологиям. решения для охлаждения центров обработки данных с 2009 года. Понимание уникальных требований современной ИТ-инфраструктуры, включая AI и HPC : наш опыт охватывает решения для жидкостного охлаждения , , высокопроизводительные теплообменники и точное проектирование систем . Используя выдающуюся команду теплового проектирования, расширенные возможности моделирования и сертификаты качества ISO/TS, мы сотрудничаем с операторами центров обработки данных для разработки индивидуальных высокоэффективных стратегий охлаждения , которые управляют даже самой высокой плотностью мощности, обеспечивая оптимальную производительность и энергоэффективность..