7 ошибок при проектировании инженерной инфраструктуры ЦОД

Инженерная инфраструктура ЦОД редко выходит из строя из-за одной очевидной ошибки. Чаще проблема формируется цепочкой решений: неполные исходные данные приводят к неверному расчёту мощности, формальное резервирование оставляет общие точки отказа, а поздний выбор шкафов, PDU и кабельных трасс заставляет переделывать уже согласованные разделы.

Цена таких просчётов становится заметна не только во время аварии. Проект дорожает ещё на стройке, сроки сдвигаются, оборудование не помещается в зал, а эксплуатация получает систему, которую трудно расширять и обслуживать без остановки. Ниже — семь ошибок, которые важно исключить до выпуска рабочей документации.

Ошибка 1. Начинать проект без полного ТЗ и исходных данных

Фраза «нужен ЦОД на столько-то стоек» не является техническим заданием. Для концепции нужны профиль нагрузки, плотность мощности на стойку, требования к доступности, сценарии роста, ограничения площадки, параметры внешних сетей, требования к пожарной безопасности, физической защите и эксплуатации.

Если проектировщик не знает, какие сервисы будут размещены в зале, как они распределятся между стойками и что допускается отключать при аварии, решения неизбежно строятся на предположениях. Позднее уточнение одного параметра затрагивает электроснабжение, охлаждение, строительные конструкции, компоновку и сроки поставки. В материале о причинах срыва сроков проектирования ЦОД специалисты отдельно подчёркивают: экономия на предпроектной подготовке и абстрактное ТЗ приводят к дополнительным итерациям и росту затрат.

Ошибка 2. Считать электропитание по номиналам оборудования

Сумма мощностей с шильдиков не равна реальному профилю ЦОД. Она не показывает коэффициент мощности, пусковые токи, кратковременные перегрузки, неравномерность фаз, одновременность нагрузки и темп её роста. Простой процент запаса тоже не заменяет расчёт: чрезмерно завышенный ИБП работает в неэффективной зоне, а заниженный ограничивает расширение и повышает риск перегрузки.

Нужно считать активную и полную мощность по группам потребителей, учитывать охлаждение и вспомогательные системы, режимы отказа и обслуживания. Время автономной работы задаётся сценарием: перекрыть запуск ДГУ, безопасно завершить процессы или поддерживать нагрузку дольше. Подробную методику мы разобрали в статье «ИБП для ЦОД: расчёт мощности, резервирование и время автономной работы».

Ошибка 3. Резервировать устройства, но не весь путь

Два ИБП не создают схему 2N, если у них общий ввод, байпас, распределительный щит или кабельный маршрут. Два сетевых интерфейса не дают независимости, если оба кабеля приходят в одну панель или проходят через общую точку повреждения. Резервирование проверяют не количеством оборудования, а отсутствием общей точки отказа от источника до нагрузки.

Особенно часто зависимость скрывается внутри стойки: сервер с двумя блоками питания подключён к одной PDU, обе PDU питаются от одного автомата, а АВР установлен после общего незащищённого участка. В портфеле Lindex представлены блоки распределения питания, интеллектуальные PDU REMER и решения с автоматическим вводом резерва, но их нужно включать в целостную архитектуру A/B.

Как избежать: нарисовать маршруты A и B поверх планов помещения, отметить все общие элементы и режимы ремонта, затем провести анализ отказов для каждого критического сервиса. Схема должна сохранять допустимую нагрузку не только при аварии, но и во время регламентного обслуживания.

Ошибка 4. Проектировать СКС после выбора активного оборудования

Кабельная инфраструктура живёт дольше большинства коммутаторов и серверов. Если выбирать её под единственную текущую конфигурацию, следующая модернизация потребует новых трасс, простоя и переподключения рабочих систем. Ошибка проявляется в недостатке волокон, неверной полярности MTP/MPO, перегруженных кроссах, смешении каналов A/B и отсутствии места для коммутации.

Для ЦОД в ассортименте Lindex есть модульная оптоволоконная система EUROLAN CORE на 8 или 12 волокон, кассеты MTP–LC/MTP и панели высокой плотности. Решение на базе центрального кросса позволяет развивать сеть без глобальной перестройки, а 4U-шкафы CORE рассчитаны на высокую плотность коммутации.

Как избежать: сформировать сетевую архитектуру и карту скоростей на весь горизонт развития; определить OS2/OM4/OM5, LC или MTP/MPO, количество волокон и полярность; физически разделить маршруты; заложить резерв в лотках, кроссах и организаторах. Подробнее — в статье «СКС для ЦОД: как выбрать медную и оптическую кабельную инфраструктуру».

Ошибка 5. Игнорировать воздушные потоки и изоляцию коридоров

Номинальной холодопроизводительности недостаточно, если холодный и горячий воздух смешиваются. Пустые места в стойках, незакрытые вводы, разная глубина шкафов, препятствия под фальшполом и хаотичная прокладка кабелей создают локальные зоны перегрева. При этом датчик в помещении может показывать нормальную среднюю температуру.

Система изоляции холодных или горячих коридоров разделяет воздушные зоны и повышает эффективность охлаждения. Представленная Lindex универсальная система коридоров имеет самонесущую конструкцию, совместима со шкафами разных производителей и допускает замену шкафов без переноса основных трасс.

Как избежать: моделировать воздушные потоки вместе с расстановкой стоек и кабельными маршрутами; применять заглушки, уплотнения и панели-компенсаторы; измерять температуру на входе оборудования в нескольких точках; проверять сценарии отказа кондиционера и увеличения плотности нагрузки.

Ошибка 6. Выбирать шкафы и PDU в конце проекта

Шкаф — не мебель, а узел, в котором сходятся несущая конструкция, охлаждение, питание, СКС, заземление, мониторинг и эксплуатационный доступ. Неверная глубина, грузоподъёмность или перфорация ограничивают выбор оборудования. Недостаток вертикального пространства для PDU и организаторов усложняет коммутацию и перекрывает воздушный поток.

Для каждой стойки заранее определяют число и тип розеток, ток ввода, фазность, измерение и коммутацию на уровне розетки, датчики среды, сетевой интерфейс и способ обслуживания. Интеллектуальные PDU REMER из портфеля Lindex позволяют контролировать параметры электропитания и интегрировать распределение с мониторингом, но ценность этих функций зависит от правильно заданной структуры данных и порогов тревоги.

Как избежать: выпускать типовые компоновки стоек для разных профилей нагрузки; проверять габариты, массу, центр тяжести и сервисные зоны; согласовывать PDU, кабельные вводы, организаторы и заземление до заказа шкафов.

Ошибка 7. Не проектировать мониторинг, испытания и обслуживание

Если проект заканчивается спецификацией оборудования, эксплуатация получает набор устройств без понятной модели управления. Тревоги ИБП, PDU, климата, протечек и доступа могут оставаться в отдельных интерфейсах; пороги не согласованы; журнал событий не помогает определить первопричину. Не менее опасна приёмка «по факту включения» без испытаний аварийных сценариев.

До закупки нужно определить состав сигналов, протоколы, хранение истории, роли пользователей и матрицу оповещений. Программа ПНР должна включать отказ вводов, переход на ИБП и ДГУ, работу байпаса, потерю связи, отказ охлаждения и восстановление после аварии. Для СКС нужны сертификационные измерения и исполнительная документация, для силовой части — протоколы защит, фазировки, нагрузки и автономности.

Как избежать: вовлечь эксплуатацию в концепцию; включить мониторинг, регламенты и ЗИП в проект; заранее определить критерии приёмки. Lindex выполняет проектную поддержку и сервисные работы, диагностику качества электроэнергии, монтаж, ПНР и техническое обслуживание инженерных систем.

Как ассортимент и экспертиза Lindex закрывают риски

Комплексный проект проще согласовать, когда связанные подсистемы рассматриваются одной инженерной командой. В портфеле Lindex для ЦОД представлены:

• медные и оптические СКС, включая высокоплотную систему EUROLAN CORE;
• телекоммуникационные шкафы, стойки, панели и кабельные организаторы;
• ИБП, батарейные шкафы, сервисные байпасы и системы мониторинга;
• интеллектуальные PDU REMER и решения с автоматическим вводом резерва;
• кабельные лотки для ЦОД, осветительное оборудование и системы изоляции коридоров;
• НКУ, проектная поддержка, диагностика, монтаж, ПНР и техническое обслуживание.

В B2B-каталоге Lindex выделены лотки, освещение и коридоры ЦОД, а смежные разделы закрывают ИБП, PDU, СКС и шкафы. На отраслевых мероприятиях Lindex и REMER демонстрируют связку из ИБП, серверного шкафа, интеллектуального распределения питания и датчиков — именно такой системный подход снижает риск несовместимости между разделами.

Чек-лист проектировщика

1. ТЗ: зафиксированы назначение ЦОД, уровень доступности, плотность мощности и горизонт роста.
2. Исходные данные: обследованы площадка, вводы, конструкции, климатические и эксплуатационные ограничения.
3. Электропитание: рассчитаны кВт и кВА, перегрузка, селективность, автономность, ДГУ и байпас.
4. Резервирование: маршруты A/B не имеют общих незащищённых участков.
5. СКС: определены среда передачи, скорости, полярность, плотность портов, маркировка и программа измерений.
6. Охлаждение: проверены воздушные потоки, изоляция коридоров и сценарии роста нагрузки.
7. Стойки: согласованы габариты, масса, перфорация, PDU, организаторы и сервисные зоны.
8. Мониторинг: задан перечень сигналов, пороги, журналирование и матрица оповещений.
9. Приёмка: подготовлены сценарии комплексных испытаний и критерии результата.
10. Эксплуатация: предусмотрены обслуживание без остановки, ЗИП и порядок внесения изменений.

Какой итог?

Главная ошибка при проектировании ЦОД — рассматривать электропитание, охлаждение, СКС, шкафы и мониторинг как независимые закупки. Надёжность определяется полным путём сервиса и поведением системы при отказе, ремонте и расширении.

Качественная концепция, проверенные исходные данные, анализ общих точек отказа и заранее разработанная программа приёмки уменьшают число переделок и делают стоимость проекта управляемой. Lindex помогает подобрать совместимые компоненты и связать поставку оборудования с проектной поддержкой, монтажом, пусконаладкой и дальнейшим сервисом.