Центры обработки данных

В центре обработки данных одна исходная величина одновременно влияет на несколько инженерных систем. Расчётная ИТ-нагрузка характеризует электрическую мощность, связанную с размещаемым вычислительным оборудованием. От неё зависят питание оборудования, тепловыделения, потребность в охлаждении, состав части резервной инфраструктуры и условия размещения оборудования в машинных залах. Поэтому проект ЦОД проверяют как связанную систему, а не как независимый набор электротехнических, вентиляционных и технологических решений.

Важны не только итоговые мощности. Специалист сопоставляет размещение вычислительного оборудования с однолинейными схемами электроснабжения, резервными источниками, расчётами охлаждения, планами технических помещений, кабельными трассами, автоматизацией и мониторингом. Если один исходный параметр изменился, необходимо установить, какие связанные решения были рассчитаны по прежнему состоянию.

Инженерная инфраструктура ЦОД в этой задаче — совокупность систем, обеспечивающих работу вычислительного оборудования: электроснабжение, резервирование, охлаждение и вентиляция технологических помещений, кабельные связи, автоматизация и мониторинг. Конкретный состав определяется проектом. Само назначение объекта не подтверждает наличие определённой схемы резервирования, количества источников или заданного уровня отказоустойчивости.

Расчётная ИТ-нагрузка

Исходные данные по ИТ-нагрузке связывают вычислительное оборудование сразу с электротехническими и климатическими решениями. Сначала устанавливают состав и размещение оборудования, для которого принята расчётная нагрузка. Затем эту величину прослеживают до однолинейной схемы электроснабжения и до расчёта тепловых поступлений в технологических помещениях.

Значение имеет и плотность размещения оборудования. Одинаковая суммарная нагрузка при различной компоновке машинного зала может по-разному распределяться по отдельным зонам. Поэтому общий показатель сопоставляют с планами размещения стоек и оборудования. После этого проверяют, соответствует ли инженерное обеспечение фактической проектной компоновке.

Рост ИТ-нагрузки после выпуска смежных разделов требует последовательной сверки. Новое значение сначала сопоставляют со схемой электроснабжения. Затем проверяют расчётную тепловую нагрузку и системы охлаждения. Если увеличение связано с дополнительным оборудованием или изменением его размещения, рассматривают также конструктивные нагрузки, кабельные маршруты и автоматизацию.

Электроснабжение и резервные источники

Однолинейная схема показывает электрическую архитектуру ЦОД: основные связи между источниками, распределительными элементами и потребителями. Её сопоставляют с расчётной ИТ-нагрузкой и теми резервными источниками, которые фактически предусмотрены проектом. Расчётное значение должно относиться к той же конфигурации оборудования, что и электрическая схема.

Резервирование означает предусмотренную проектом возможность сохранить определённую функцию при переходе на резервный источник, линию или другое оборудование. Для проверки одной подписи «резерв» недостаточно. Нужно установить, какой элемент резервируется, каким путём получает питание при изменении режима и какие устройства участвуют в переключении.

Например, электрическая схема может быть скорректирована после изменения состава оборудования. Тогда специалист проверяет не только новые соединения. Схему сопоставляют со сценариями переключения и автоматизацией, потому что прежняя логика управления может относиться к другой конфигурации электроснабжения.

Отдельно различают основное состояние и предусмотренные проектом сценарии отказа или обслуживания. Каждый такой сценарий рассматривают по реальным связям: какой источник или участок становится недоступным, какой путь остаётся в работе и какие инженерные системы зависят от этого переключения. Конкретная схема подтверждается только проектными материалами.

Тепловая нагрузка и охлаждение

Вычислительное оборудование при работе выделяет тепло. Тепловая нагрузка в проекте характеризует количество тепла, которое должно учитываться при расчёте охлаждения технологического помещения. Её сопоставляют с ИТ-нагрузкой, размещением оборудования и расчётными режимами систем охлаждения и вентиляции.

Проверка идёт от исходного оборудования к климатическому решению. Сначала определяют, для какой компоновки и какого состава оборудования выполнен расчёт. Затем сравнивают тепловыделения с принятой схемой охлаждения. После этого планы машинного зала позволяют проверить пространственную связь между источниками тепла и оборудованием инженерных систем.

Рост ИТ-нагрузки без пересмотра охлаждения создаёт характерную несогласованность. Электротехническая часть может уже учитывать дополнительное вычислительное оборудование, а расчёт тепловой нагрузки и схема охлаждения продолжать относиться к прежнему составу. В таком случае обновление одной системы не подтверждает согласованность ЦОД в целом.

Возможна и другая ситуация: суммарная нагрузка формально не изменилась, но стойки перераспределены внутри машинного зала. Тогда итоговая мощность остаётся прежней, однако локальное распределение тепловыделений и воздушных потоков требует повторной сверки с новой компоновкой.

Машинный зал и технические помещения

Планы машинных залов, электрощитовых, аккумуляторных и других технических зон связывают расчётные решения с физическим размещением оборудования. Для каждой зоны специалист сопоставляет назначение помещения, расположение оборудования, инженерные подключения и маршруты обслуживания.

Особенно важна стойковая компоновка. Перенос или добавление стоек способен одновременно изменить распределение ИТ-нагрузки, тепловыделений, кабельных трасс и условий прохождения воздушных потоков. При изменении плана машинного зала проверяют все эти зависимости, а не только геометрию размещения.

Проект может содержать актуальный план машинного зала и инженерные схемы предыдущей редакции. Такой комплект требует восстановления общей версии: какое размещение принято окончательно, какая нагрузка относится к нему и какие электрические и климатические решения разработаны именно для этой конфигурации.

Кабельные трассы и физические связи оборудования

Кабельная инфраструктура соединяет вычислительное и инженерное оборудование с распределительными и управляющими системами. Схемы кабельных трасс сопоставляют с фактическим размещением оборудования и технических зон. Так устанавливают, относятся ли предусмотренные маршруты к актуальной компоновке ЦОД.

Перекомпоновка машинного зала может оставить электрические мощности без изменения, но изменить физические маршруты. Тогда проверяют трассы от оборудования до соответствующих точек подключения и размещение элементов, через которые проходит связь. Если план стоек обновлён, а кабельные схемы сохранили прежнюю геометрию, документы описывают разные состояния объекта.

Кабельные и воздушные потоки рассматривают совместно там, где их взаимное расположение связано с выбранной компоновкой. Перенос оборудования может изменить пространство, используемое инженерной инфраструктурой. Поэтому новая планировка требует сверки не только кабельных трасс, но и схем охлаждения, связанных с расположением оборудования.

Автоматизация, мониторинг и сценарии переключения

Автоматизация связывает состояние инженерных систем с предусмотренными проектом действиями. При изменении электрической архитектуры специалист устанавливает, сохранилась ли актуальность логики переключения. Новая схема питания и прежняя схема автоматизации могут по отдельности выглядеть завершёнными, но относиться к разным конфигурациям.

Мониторинг рассматривают через те параметры и состояния, которые предусмотрены проектом для контроля инженерных систем. Если меняется состав оборудования, резервная схема или охлаждение, проверяют, затрагивает ли корректировка соответствующие контрольные связи.

Сценарий отказа особенно хорошо показывает взаимозависимость систем. Изменение состояния электроснабжения может повлиять на оборудование, которое обеспечивает охлаждение, а его состояние, в свою очередь, связано с условиями работы вычислительной нагрузки. Поэтому предусмотренный проектом сценарий прослеживают через электрическую схему, инженерное оборудование и автоматизацию как одну последовательность.

Конструктивные нагрузки при изменении оборудования

Компоновка вычислительного и инженерного оборудования имеет строительные последствия. Если изменение ИТ-нагрузки реализуется через дополнительное оборудование или новую конфигурацию технических зон, необходимо определить, меняются ли нагрузки, передаваемые на строительные конструкции.

Для этого исходные данные по оборудованию связывают с его фактическим местом на плане. Затем устанавливают, какие конструктивные решения относятся к этой зоне. Изменение нагрузки без обновления связанного расчёта создаёт другую проблему, чем простая несинхронность планов: в первом случае требуется повторная оценка конструктивного решения, во втором сначала восстанавливается актуальная проектная редакция.

Проверять конструктивную часть автоматически после любого изменения ИТ-нагрузки не требуется. Связь должна быть технически прослеживаемой. Если корректировка влияет только на режим работы уже принятого оборудования и не меняет строительные воздействия, объём повторной проверки будет иным, чем при установке дополнительных стоек или инженерных агрегатов.

Три типичных цепочки изменений

Объём повторной проверки удобнее определять от первичного изменения к зависимым документам:

• Увеличилась ИТ-нагрузка. Новое значение сопоставляют с электроснабжением и тепловой нагрузкой. Затем проверяют охлаждение, а при изменении состава или размещения оборудования — конструктивные решения, кабельные трассы и автоматизацию.
• Изменилась электрическая схема. Устанавливают новую конфигурацию основных и резервных связей и повторно рассматривают предусмотренные сценарии переключения и относящуюся к ним автоматизацию.
• Перекомпонован машинный зал. Новое размещение сопоставляют с распределением оборудования, кабельными маршрутами, воздушными потоками и другими инженерными связями, которые зависят от геометрии помещения.

При расхождении документов сначала определяют причину. Иногда отсутствует исходный параметр, от которого зависит расчёт. Иногда два раздела выполнены по разным редакциям проекта. В третьем случае документы относятся к одной версии, но техническое решение не согласуется с исходными данными. Для каждой ситуации требуется свой путь: получить недостающие сведения, синхронизировать редакции либо корректировать само решение.

Комплект для предметной проверки

Документы должны позволять пройти от расчётной ИТ-нагрузки до каждой зависимой инженерной системы. Основу комплекта составляют:

• исходные данные по ИТ-нагрузке и размещению вычислительного оборудования;
• однолинейные схемы электроснабжения и резервных источников;
• расчёты и схемы охлаждения и вентиляции технологических помещений;
• планы машинных залов, электрощитовых, аккумуляторных и других технических зон;
• схемы кабельных трасс, автоматизации, мониторинга и взаимодействия инженерных систем.

Каждый документ отвечает на отдельный вопрос. Исходные данные показывают, какую вычислительную нагрузку и компоновку приняли проектировщики. Электрические схемы раскрывают путь питания и резервные связи. Расчёты охлаждения связывают тепловыделения с климатическими системами. Планы технических помещений фиксируют физическое размещение оборудования. Кабельные схемы и автоматизация показывают, как элементы соединены и взаимодействуют.

Если отсутствует документ, от которого зависит ключевой параметр, конкретный вывод по этой связи откладывают до получения данных. Если невозможно определить актуальную редакцию, сначала устанавливают фактически принятую конфигурацию. Если исходный параметр присутствует, но его связь со смежным решением не прослеживается, соответствующий участок проекта требует уточнения.

Результат проверки проекта ЦОД

После сверки можно определить, насколько последовательно расчётная ИТ-нагрузка отражена в электроснабжении, резервировании, охлаждении, компоновке, кабельной инфраструктуре и автоматизации. Отдельно выявляются зависимости, которые требуют повторной проверки после изменения мощности, электрической схемы или размещения оборудования.

Электрическую часть можно дополнительно рассматривать по направлению «Система электроснабжения». Расчёты и схемы климатических систем относятся к направлению «Отопление, вентиляция и кондиционирование воздуха». Практическая связь условий в технологическом помещении с серверным оборудованием представлена в кейсе «Проверка климатических условий эксплуатации серверного оборудования».

Результат можно использовать для подготовки согласованного комплекта и определения объёма повторной проверки после изменения ключевого параметра. Он характеризует проектную архитектуру и представленные расчётные сценарии. Для подтверждения фактической доступности, отказоустойчивости и работы ЦОД после ввода нужны данные о реализованных системах, их наладке и фактической эксплуатации.

Исходные данные по ИТ-нагрузке, электрические схемы, расчёты охлаждения и планы технических помещений можно направить на tulaproekt@e-gmail.ru или обсудить по +7 (905) 478-98-57.