Дефицит пространства в центрах обработки данных

На первый взгляд, вопрос дефицита пространства в центре обработки данных кажется технической сложностью. Однако это проявление более глубокой системной проблемы, которая определяет жизнеспособность всего объекта. Пространство в ЦОД связано не просто с квадратными метрами, но с хрупким равновесием между тремя критическими ресурсами: электропитанием, охлаждением и физической площадью для размещения оборудования и кабельной инфраструктуры. И в совокупности эти три компонента образуют так называемую «триаду ограничений», где слабейшее звено диктует предел всей инфраструктуры.

Глобальный рынок демонстрирует критическую напряжённость, связанную с этим. По данным CBRE на первый квартал 2025 года, глобальный взвешенный средний уровень свободных площадей в ЦОД составил 6,6%. Это означает, что 93,4% площадей в ЦОД по миру занято. В критических рынках ситуация ещё более острая: в Северной Виргинии уровень свободных площадей составляет 0,76%, что свидетельствует о практически полной насыщенности рынка. Сингапур, второй по важности рынок в Азиатско-Тихоокеанском регионе, имеет всего 2% свободных площадей. Это означает, что новые ИТ-мощности физически некуда размещать без кардинальной реконструкции существующих объектов

Дефицит пространства имеет различные аспекты для разных групп профессионалов. Для инженеров-проектировщиков это означает необходимость предусмотреть масштабируемость без полной переделки инфраструктуры. Для операционных руководителей дефицит пространства преобразуется в проблему "зависшей емкости" — ситуацию, когда установленная мощность охлаждения и электропитания становится недостижимой из-за отсутствия физического места. Для архитекторов систем ограничение пространства требует стратегического переосмысления: вместо линейного расширения необходимо переходить к вертикальной плотности и переосмыслению охлаждающих систем.

Критическая ошибка проектирования заключается в рассмотрении этих трех параметров как независимых. На практике они составляют связанную систему, где наиболее ограничивающий параметр определяет пропускную способность всей системы.

Рассмотрим типичный сценарий проектирования. Инженер определяет плотность мощности как, например, 100 Вт на кв.м. Питание и охлаждение спроектированы для этого уровня. Однако кабельные системы, распределительные шкафы и необходимые проходы занимают значительную часть площади. При практическом развертывании реальная полезная площадь составляет примерно 70 кв.м вместо проектных 100. Попытка достичь проектной плотности означает увеличение реальной нагрузки до 142 Вт/кв.м на оставшейся площади. Система охлаждения, спроектированная для 100 Вт/кв.м, физически не может отвести эту мощность.

Решение требует рассмотрения всех трех параметров как единого целого. Когда один из них становится узким местом, остальные два автоматически теряют функциональность.

Традиционная архитектура ЦОД с поднятым полом и подачей холодного воздуха через перфорированные плитки была оптимальна для плотностей 5-10 кВт на стойку. Холодный воздух поступает из подпольного пространства, проходит через перфорированные плитки и охлаждает переднюю часть серверов.

При плотностях выше 8-10 кВт на стойку эта архитектура начинает разрушаться. Требуемый объём воздуха становится проблематичным. При 50 кВт на стойку требуется 222 м³/мин при разности температур 11°С. При 100 кВт — 445 м³/мин. Это создаёт избыточный воздушный поток, что приводит к нелинейному увеличению энергопотребления вентиляторов. Увеличение воздушного потока на 10% требует 33% дополнительной мощности вентилятора в соответствии с кубическим законом масштабирования.

Кроме того, поднятый пол занимает значительное пространство. Типичная высота подпольного плена составляет 18-36 дюймов. Это означает потерю от 0,45 до 0,9 метра высоты помещения — 13-26% потерянного объема, который не может использоваться для оборудования.

Современная архитектура развивается в направлении локализованного охлаждения с физическими барьерами: Замкнутый горячий коридор (ЗГК), когда горячий выхлоп направляется прямо в чиллеры или прецизионные кондиционеры или Замкнутый холодный коридор (ЗХК), когда холодный воздух подаётся только в переднюю зону стоек. Вместо покрытия всего пола перфорированными плитками, система разделяется на активные и инертные зоны с направленным потоком воздуха.

Одна из наиболее недооцениваемых проблем дефицита пространства — кабельное загромождение. Подпольный плен ЦОД превращается в запутанный клубок кабелей: питание (с необходимыми дублирующими цепями A и B), волоконно-оптические кабели, управляющие линии. Заблокированные кабелями перфорированные плитки перестают пропускать воздух. Исследования показывают, что неправильная укладка кабелей может снизить практический пропускной поток воздуха на 40% относительно проектного значения.

Решение требует раннего планирования кабельной архитектуры как интегральной части пространственного дизайна. Современные ЦОД используют структурированные кабельные системы с надземной маршрутизацией кабелей и централизованными патч-панелями, что позволяет освободить 10-15% подполья для фактического воздушного потока.

"Зависшая емкость" (stranded capacity) возникает, когда одна из трех компонент (пространство, питание, охлаждение) находится на пределе, а остальные остаются недоиспользованными.

Типичный пример: ЦОД спроектирован для 100 Вт/кв.м. Питание и охлаждение рассчитаны на эту плотность. Но из-за неправильной укладки перфорированных плиток холодный воздух проходит мимо оборудования. Фактическая функциональная плотность составляет 50 Вт/кв.м. Таким образом, получаем ситуацию, когда площади использованы на 100%, электропитание, способное подавать 100 Вт/кв.м, используется только на 50% и охлаждение работает вполсилы. Оставшиеся мощности "зависли", их невозможно использовать, хотя средства на их получение и монтаж потрачены.

Исследование показывает, что ЦОД часто работают с серьёзным перезакладом: система охлаждения установлена с большим запасом, который никогда не используется. Причины многообразны:

1. Несоответствие между проектной и фактической плотностью. ЦОД рассчитан на 70 Вт/кв.м, но работает на 30.
2. Ненадлежащие перфорированные плитки, установленные случайно вместо стратегического позиционирования.
3. Кабельное загромождение, препятствующее равномерному распределению воздуха.
4. Консервативное проектирование с перепроектированием для безопасности.

Решение требует комплексного подхода: комплексный аудит инфраструктуры, по его результатам - план мероприятий по ее оптимизации, а затем - регулярный мониторинг через DCIM-системы, с балансированием между тремя параметрами как единого целого.

Появление мощных графических процессоров создало новый вызов для планирования пространства. NVIDIA H100 GPU потребляет до 700 Вт мощности под нагрузкой. Сервер DGX H100 с восемью такими процессорами требует примерно 10-11 кВт питания.

Четыре таких сервера в одной стойке требуют 40-45 кВт мощности. Это в 4-5 раз выше, чем традиционные стойки, для которых типична плотность 7-10 кВт.

Однако высокоплотные ИИ-рабочие нагрузки требуют не просто больше питания. Они требуют соответствующего увеличения возможностей систем охлаждения, электрораспределения и кабельной инфраструктуры.

Традиционное воздушное охлаждение достигло физического предела при плотности выше 30-40 кВт на стойку. Спасением является жидкостное охлаждение, которое может перемещать тепло более эффективно, чем воздух.

Однако внедрение жидкостного охлаждения требует полной перестройки всей пространственной архитектуры. Требуются прямые жидкостные соединения между холодильными установками и стойками, система управления давлением, вторичная система охлаждения. Физическое пространство, необходимое для ИИ-рабочей нагрузки, может фактически увеличиться несмотря на увеличение вычислительной плотности из-за требований системы жидкостного охлаждения.

Традиционный цикл планирования ЦОД предполагал 3-5 лет расширения с запасом 30% "на развитие" устарел. Это работало в стабильной среде с предсказуемой эволюцией технологий. Сегодня же такой подход неприменим.

По состоянию на первый квартал 2025 года глобальный уровень использования составляет 93,4%. Goldman Sachs прогнозирует, что спрос на электропитание ЦОД возрастёт на 165% к 2030 году по сравнению с 2023 годом. Это означает, что буквально каждый существующий кубический метр пространства ЦОД уже поглощен или скоро будет.

На практике это означает: невозможность быстрого расширения без физической переделки инфраструктуры; растущее ценовое давление; необходимость селективности в проектировании новых объектов; полное переосмысление стратегии развития организации.

Вместо одного большого ЦОД с линейным расширением организации переходят к сетям более мелких, специализированных объектов.

При уровне занятости выше 90%, любая ошибка в планировании пространства означает невозможность развития. Именно поэтому DCIM-системы перестали быть «опциональными» — они стали ключевым элементом стратегического планирования.

DCIM-системы отслеживают всю триаду компонентов инфраструктуры ЦОД в реальном времени: пространство (физическое расположение, занятость стоек); питание (реальное потребление, нагрузка на распределители); охлаждение (температурные условия, производительность систем).

Критически важно, чтобы DCIM-система была сконфигурирована для автоматического расчета зависшей емкости, прогнозирования конфликтов ресурсов и сценарного анализа влияния изменений плотности.

Для малых и средних организаций приемлемы open-source или лёгкие DCIM-решения, фокусирующиеся на основных метриках. Для крупных корпоративных и гиперскейловых объектов требуются решенияуровня enterprise с API-интеграцией и поддержкой AI-прогнозирования.

Жидкостное охлаждение снижает потребление электроэнергии охлаждением на 10-20% согласно исследованиям. Однако эта экономия реализуются только при условии, что архитектура инфраструктуры спроектирована для жидкостного охлаждения с начала, а не модифицирована впоследствии.

Жидкостное охлаждение позволяет увеличить плотность с 5-10 кВт на стойку (воздушное охлаждение) до 50-100+ кВт на стойку. Это означает существенное снижение требований к физическому пространству для достижения той же вычислительной мощности.

Однако интеграция жидкостного охлаждения требует полного переоборудования системы охлаждения, переустановки электрораспределения, переделки кабельной системы и возможного изменения архитектуры стоек.

Дефицит пространства в современных ЦОД — это вызов системного характера, требующий глубокого понимания взаимосвязей в триаде: пространство — энергия — охлаждение. Уровень занятости глобальных ЦОД превысил 93%, а в критических рынках достигает 98%. Планирование пространства больше не может быть тактической задачей.

Три ключевых момента определяют успешное управление этим вызовом:

- Считайте триаду единым организмом. Слабейшее звено определяет возможности всей системы

- Откажитесь от устаревших архитектур. Поднятый пол и «плавающий» воздух — прошлое. Будущее — за локализованным охлаждением и жидкостными системами.

- Инвестируйте в цифровое управление. DCIM — это не «мониторинг», а инструмент стратегического планирования и предотвращения кризисов.

Платформы управления инфраструктурой развиваются стремительно. ТТе, кто воспринимает пространство как динамический ресурс, а не как статичную характеристику здания, получат существенное конкурентное преимущество. Остальные будут постоянно «тушить пожары» неожиданных ограничений и переплачивать за недоиспользованные мощности.