Что нужно подготовить на объекте перед установкой микроЦОД: питание, сеть, охлаждение и размещение
Даже готовый интегрированный микроЦОД нельзя просто доставить на объект, поставить в свободном помещении и подключить к ближайшей электрической линии. До монтажа необходимо проверить место установки, маршрут доставки, параметры электропитания, заземление, сетевые подключения, условия отвода тепла и возможность последующего технического обслуживания.
Чем раньше эти вопросы проработаны, тем меньше вероятность, что монтаж остановится из-за слишком узкого дверного проёма, неподготовленной линии электропитания, отсутствия кабельных трасс или невозможности правильно разместить элементы системы охлаждения.
Разберём, что необходимо подготовить на объекте до поставки микроЦОД, какие исходные данные передать специалистам и что проверить непосредственно перед монтажом и вводом оборудования в эксплуатацию.
Содержание
- Что определить до подготовки объекта
- Как выбрать место для микроЦОД
- Как проверить маршрут доставки
- Пол, основание и допустимая нагрузка
- Сколько свободного пространства предусмотреть
- Как подготовить электропитание
- Заземление и электрическая безопасность
- Что учесть при резервном электропитании
- Как подготовить сетевые подключения
- Кабельные трассы и ввод коммуникаций
- Что подготовить для системы охлаждения
- Температура, влажность и состояние помещения
- Связь и мониторинг инженерных систем
- Физическая безопасность и доступ
- Какие данные передать поставщику
- Чек-лист готовности объекта
- Типичные ошибки подготовки
- Что проверить перед вводом в эксплуатацию
- Итог
- Часто задаваемые вопросы
Что определить до подготовки объекта
Подготовка объекта начинается не с прокладки кабеля или выбора свободного участка стены, а с технического задания. Специалисты должны понимать, какое оборудование будет установлено, какую нагрузку оно создаст и какие инженерные системы понадобятся для его стабильной работы.
До начала работ желательно определить:
- габариты и массу выбранной конфигурации;
- расчётную IT-нагрузку;
- мощность ИБП;
- необходимое время автономной работы;
- тип и мощность охлаждения;
- количество серверного и сетевого оборудования;
- количество необходимых сетевых подключений;
- способ подключения к локальной сети и внешним каналам связи;
- состав системы мониторинга;
- требования к удалённому контролю;
- планируемый резерв для дальнейшего расширения.
Перед подготовкой площадки полезно заранее понимать архитектуру готового решения. В отдельном материале DataStream подробно рассмотрен микро дата центр INVT iSmart, в котором в одном шкафу объединены электропитание, прецизионное охлаждение, мониторинг и физическая защита. Такой пример помогает определить, какие инженерные системы уже входят в состав решения, а какие условия необходимо обеспечить непосредственно на объекте.
Как выбрать место для микроЦОД
Интегрированная конструкция позволяет во многих случаях отказаться от создания полноценной классической серверной, однако это не означает, что микроЦОД можно установить в любом свободном месте.
Площадка должна обеспечивать:
- достаточную площадь для размещения оборудования;
- ровное и прочное основание;
- доступ к подготовленному электропитанию;
- возможность прокладки сетевых линий;
- условия для нормальной работы охлаждения;
- свободный доступ для обслуживания;
- защиту от случайных механических воздействий;
- ограничение доступа посторонних лиц.
Не ориентироваться только на размеры корпуса
Одна из распространённых ошибок — проверить, помещается ли шкаф на выделенном участке, и считать вопрос размещения закрытым.
На практике вокруг оборудования требуется свободное пространство. Необходимо открывать двери, устанавливать и извлекать серверы, подключать кабели, обслуживать ИБП, аккумуляторы и климатическое оборудование.
Если шкаф установлен вплотную к стене, мебели или другому техническому оборудованию, даже простая операция по замене компонента может значительно усложниться.
Как проверить маршрут доставки
Подготовленная площадка не принесёт пользы, если оборудование невозможно доставить к ней внутри здания. Поэтому весь маршрут следует проверить до отгрузки.
Оценку начинают от места разгрузки и заканчивают непосредственно точкой установки.
Что необходимо измерить
- ширину и высоту наружных дверей;
- габариты внутренних дверных проёмов;
- ширину коридоров;
- размеры лифтов;
- грузоподъёмность лифта;
- ширину лестниц и площадок;
- пространство для поворота оборудования;
- высоту потолка;
- наличие порогов;
- перепады уровня пола.
Учитывать необходимо не только размеры самого шкафа, но и транспортную упаковку. Она увеличивает ширину, глубину и иногда высоту перевозимого оборудования.
Особенно важно проверить повороты
Даже достаточно широкий коридор не гарантирует, что высокий и глубокий шкаф удастся развернуть перед дверью или входом в лифт.
Проблемы часто возникают на поворотах под прямым углом, в небольших тамбурах и возле лестничных площадок. Если маршрут имеет сложную геометрию, его лучше проверить непосредственно на объекте заранее.
Пол, основание и допустимая нагрузка
МикроЦОД вместе с серверами, системами хранения, ИБП, аккумуляторами и инженерными компонентами может создавать значительную нагрузку на основание.
При оценке необходимо учитывать:
- массу самого интегрированного шкафа;
- массу установленного IT-оборудования;
- аккумуляторные модули;
- дополнительные элементы электропитания;
- массу оборудования, которое планируется установить в дальнейшем.
Основание должно оставаться стабильным
Пол в точке установки должен быть ровным и выдерживать расчётную нагрузку без заметной деформации. Перекос корпуса способен усложнить монтаж оборудования и нормальное закрытие дверей.
Если микроЦОД размещается на фальшполе, его несущую способность необходимо проверять отдельно. Для тяжёлой конфигурации может потребоваться усиление конструкции непосредственно под шкафом.
Сколько свободного пространства предусмотреть
Минимальная площадь, на которой физически помещается шкаф, и площадь, необходимая для нормальной эксплуатации, отличаются.
Свободное пространство потребуется для:
- полного открытия дверей;
- доступа к передней и задней части оборудования;
- монтажа серверов и систем хранения;
- подключения и маркировки кабелей;
- обслуживания распределения питания;
- замены аккумуляторных модулей;
- обслуживания системы охлаждения;
- проведения диагностики.
Особенно внимательно следует оценивать расстояние до стен, колонн, мебели и другого стационарного оборудования.
Доступ должен сохраняться после заполнения стойки
Пустой шкаф значительно проще обслуживать, чем полностью укомплектованную систему. Поэтому расположение нужно оценивать с учётом будущего максимального заполнения.
Как подготовить электропитание
Электропитание — одна из ключевых частей подготовки объекта. Интегрированное решение может включать собственный ИБП и распределение питания, но входная электрическая инфраструктура должна быть подготовлена со стороны здания.
До монтажа необходимо определить:
- какая электрическая мощность требуется системе;
- однофазное или трёхфазное подключение используется;
- от какого распределительного щита выполняется питание;
- какая линия выделяется под оборудование;
- какая защитная аппаратура устанавливается;
- где находится физическая точка подключения;
- предусмотрен ли резервный ввод;
- требуется ли несколько независимых линий питания.
Почему нежелательно использовать случайную существующую линию
Критичную IT-инфраструктуру не стоит без расчёта подключать к общей электрической группе, на которой уже работают освещение, офисная техника, климатическое или другое оборудование.
Такая схема затрудняет контроль нагрузки и увеличивает риск незапланированного отключения при срабатывании защиты.
Рациональнее заранее предусмотреть выделенное питание в соответствии с проектной конфигурацией.
Учесть дальнейшее увеличение нагрузки
Если первоначально используется только часть возможностей микроЦОД, электрическую инфраструктуру объекта следует проверить с учётом согласованного сценария развития.
Иначе через несколько лет может возникнуть ситуация, когда в шкафу ещё остаётся место для серверов, но входная линия уже не позволяет безопасно увеличивать нагрузку.
Заземление и электрическая безопасность
Перед вводом оборудования необходимо проверить систему защитного заземления и соответствие подготовленной электрической инфраструктуры требованиям проекта.
Внутри микроЦОД располагается большое количество электронного оборудования, соединённого силовыми и информационными линиями. Поэтому качественное защитное соединение относится к базовым требованиям площадки.
До монтажа следует убедиться, что:
- предусмотрена необходимая точка подключения заземления;
- система заземления объекта исправна;
- соединения выполняются предусмотренным способом;
- защитные устройства соответствуют выбранной электрической схеме;
- электрические работы выполнены до начала пусконаладки.
Что учесть при резервном электропитании
Встроенный ИБП позволяет поддерживать питание при кратковременном нарушении внешней сети, однако ещё до монтажа нужно определить поведение системы при более продолжительном отключении.
Возможны разные сценарии:
- аккумуляторы поддерживают инфраструктуру до восстановления внешней сети;
- ИБП обеспечивает время, необходимое для запуска генератора;
- система работает ограниченный период, после чего серверы корректно завершают работу;
- часть некритичной нагрузки отключается раньше;
- для увеличения автономности используются дополнительные аккумуляторные модули.
Сценарий аварии нужно определить заранее
Нельзя корректно подготовить резервное питание, пока неизвестно, сколько времени инфраструктура должна работать без внешней сети.
Для одного объекта достаточно нескольких минут до запуска генератора. Для другого требуется существенно более продолжительная работа от аккумуляторов.
Поэтому время автономности следует определять исходя из реального бизнес-сценария, а не выбирать формально одинаковым для всех объектов.
Как подготовить сетевые подключения
После установки микроЦОД его серверное и сетевое оборудование необходимо подключить к существующей инфраструктуре предприятия. Сетевую часть лучше подготовить до приезда монтажной группы.
Сначала определяют:
- откуда приходят внешние каналы связи;
- где расположена основная точка коммутации;
- сколько медных линий потребуется;
- сколько оптических соединений необходимо;
- какие интерфейсы используются;
- нужны ли резервные каналы;
- по какому маршруту кабели входят в шкаф;
- как подключается система мониторинга.
Основной и резервный канал
Если микроЦОД обслуживает критичные системы, один сетевой маршрут может стать единой точкой отказа.
В таких случаях стоит определить необходимость независимого резервного подключения. При этом формальный второй кабель не всегда создаёт настоящее резервирование.
Например, две линии, проходящие в одном кабельном лотке через одну и ту же строительную конструкцию, остаются уязвимыми к одному физическому повреждению.
Кабельные трассы и ввод коммуникаций
Силовые и информационные линии должны подходить к микроЦОД организованно. Если кабельные трассы проектируют уже после установки оборудования, возле шкафа быстро появляются временные решения, лишние изгибы и плохо управляемые пучки кабелей.
До монтажа определяют:
- ввод кабелей сверху или снизу;
- расположение кабельных лотков;
- разделение силовых и информационных трасс;
- маршрут оптических линий;
- допустимые радиусы изгиба;
- точки фиксации кабелей;
- резерв под дополнительные подключения;
- принцип маркировки линий.
Не перекрывать сервисный доступ
Кабельная трасса не должна проходить таким образом, чтобы после завершения монтажа невозможно было открыть дверь, снять инженерную панель или извлечь оборудование.
Особенно это важно для силовых кабелей большого сечения и крупных кабельных пучков, которые сложно быстро перенести после завершения работ.
Что подготовить для системы охлаждения
МикроЦОД может иметь собственное охлаждение внутреннего пространства, однако выделяемое серверным оборудованием тепло всё равно необходимо передать во внешнюю среду.
Поэтому подготовка зависит от конкретного исполнения климатической системы.
Заранее необходимо определить
- где располагаются элементы системы охлаждения;
- каким способом отводится тепло;
- где проходят необходимые трассы;
- требуется ли отвод конденсата;
- есть ли подходящее место для внешнего оборудования;
- какова допустимая длина трасс;
- останется ли доступ для технического обслуживания.
Охлаждение желательно проектировать до завершения ремонта
Если после отделки помещения выяснится, что климатическая система требует новых отверстий, дополнительных коммуникаций или изменения существующих трасс, подготовка объекта станет сложнее и дороже.
Поэтому расположение элементов охлаждения и маршруты инженерных коммуникаций лучше согласовать одновременно с местом установки микроЦОД.
Температура помещения всё равно имеет значение
Закрытая архитектура микроЦОД позволяет эффективнее управлять воздушными потоками, но не отменяет требований к окружающей среде.
Помещение не должно создавать условия, при которых климатическое оборудование вынуждено постоянно работать около предельного режима.
Температура, влажность и состояние помещения
До установки необходимо оценить не только свободную площадь, но и фактические условия эксплуатации.
Для размещения IT-инфраструктуры нежелательны:
- постоянно повышенная температура;
- избыточная влажность;
- значительная запылённость;
- прямое воздействие воды;
- соседство с потенциально опасными трубопроводами;
- агрессивные химические пары;
- сильная вибрация;
- места с высокой вероятностью случайного механического повреждения.
Риск протечки
Даже наличие датчиков воды не означает, что шкаф стоит устанавливать непосредственно под трубопроводом с повышенным риском протечки.
Система мониторинга помогает обнаружить аварийную ситуацию, но правильный выбор площадки должен прежде всего уменьшать вероятность её возникновения.
Связь и мониторинг инженерных систем
Современный микроЦОД должен не только обеспечивать работу IT-оборудования, но и предоставлять ответственным специалистам информацию о состоянии инженерной инфраструктуры.
На этапе подготовки площадки следует определить, как система мониторинга будет подключена к корпоративной сети и каким способом персонал получит аварийные сообщения.
Контролироваться могут:
- температура;
- влажность;
- параметры входного электропитания;
- состояние ИБП;
- состояние аккумуляторов;
- работа охлаждения;
- нагрузка на систему распределения питания;
- открытие дверей;
- задымление;
- протечка;
- другие аварийные события.
Удалённый доступ согласовывают до пусконаладки
На предприятиях политика информационной безопасности может ограничивать подключение инженерных контроллеров к корпоративной сети.
Чтобы этот вопрос не задержал ввод оборудования, желательно заранее определить:
- в какой сегмент сети подключается мониторинг;
- какие сетевые параметры используются;
- кто получает административный доступ;
- какие соединения разрешены;
- куда отправляются уведомления;
- кто отвечает за реагирование на аварии.
Физическая безопасность и доступ
Компактный формат позволяет устанавливать микроЦОД ближе к месту потребления вычислительных ресурсов. Одновременно возрастает значение физической защиты оборудования.
До запуска следует определить:
- кто имеет право открывать шкаф;
- кто отвечает за ключи или идентификаторы;
- нужна ли регистрация факта открытия дверей;
- требуется ли видеонаблюдение;
- защищены ли органы управления от случайного воздействия;
- не проходит ли рядом интенсивный поток людей или грузов.
Особое внимание этому вопросу требуется в офисах, филиалах, торговых объектах и производственных помещениях, где возле IT-инфраструктуры регулярно находятся сотрудники, не связанные с её обслуживанием.
Какие данные передать поставщику
До заказа оборудования полезно подготовить техническую анкету площадки. Чем подробнее исходные данные, тем точнее можно определить требования к конфигурации и заранее выявить ограничения объекта.
| Исходные данные | Что указать |
|---|---|
| Место установки | Назначение помещения, этаж, доступная площадь и особенности размещения |
| Маршрут доставки | Дверные проёмы, лифты, лестницы, повороты и ограничения по габаритам |
| IT-нагрузка | Количество серверов, систем хранения и сетевого оборудования |
| Электропитание | Доступная мощность, схема ввода и наличие резервирования |
| Автономность | Необходимое время работы при отсутствии внешнего питания |
| Генератор | Наличие, мощность и ориентировочное время запуска |
| Охлаждение | Условия помещения и возможность монтажа климатической инфраструктуры |
| Сеть | Количество линий, тип подключения и требования к резервированию |
| Мониторинг | Необходимые датчики, удалённый доступ и способы уведомления |
| Перспектива роста | Какое оборудование предполагается добавить в дальнейшем |
Чем полнее информация о площадке, тем меньше изменений потребуется вносить непосредственно во время монтажа.
Если необходимо купить микроцод под конкретную IT-нагрузку, поставщику желательно сразу передать данные об энергопотреблении оборудования, требуемой автономности, условиях размещения, доступной электрической мощности и предполагаемом расширении системы. Это позволяет подобрать не отдельный шкаф, а согласованную инженерную инфраструктуру.
Чек-лист готовности объекта
1. Конфигурация микроЦОД согласована.
2. Известны его габариты и масса.
3. Маршрут доставки полностью измерен.
4. Двери и повороты позволяют переместить оборудование.
5. Проверена грузоподъёмность лифта, если он используется.
6. Место установки окончательно определено.
7. Проверена несущая способность основания.
8. Оставлено пространство для открытия дверей и обслуживания.
9. Подготовлена необходимая линия электропитания.
10. Защитная аппаратура соответствует проекту.
11. Подготовлено защитное заземление.
12. Определён сценарий работы при отключении внешней сети.
13. Подготовлены основные сетевые линии.
14. При необходимости подготовлены резервные каналы.
15. Кабельные трассы подведены к месту установки.
16. Подготовлены коммуникации для системы охлаждения.
17. Предусмотрен отвод конденсата, если он требуется.
18. Проверены температура и условия помещения.
19. Определена схема подключения мониторинга.
20. Согласован удалённый доступ.
21. Назначены ответственные за эксплуатацию системы.
Типичные ошибки подготовки
-
Проверять только место установки.
Шкаф помещается в помещении, но не проходит через дверь, коридор или лифт.
```
-
Не учитывать массу полностью укомплектованной системы.
После установки серверов и аккумуляторов нагрузка на основание заметно возрастает. -
Подводить электропитание до утверждения конфигурации.
После выбора другого ИБП или изменения мощности подготовленную линию приходится переделывать. -
Использовать общую электрическую группу.
Подключение других потребителей может привести к перегрузке или незапланированному отключению. -
Откладывать вопрос заземления.
Отсутствие подготовленного подключения обнаруживается непосредственно перед запуском. -
Проектировать охлаждение после завершения ремонта.
В результате приходится повторно выполнять строительные и монтажные работы. -
Не предусматривать отвод конденсата.
Климатическое оборудование установлено, но удалить образующуюся влагу штатным способом невозможно. -
Считать два кабеля полноценным резервированием.
Если обе линии проходят по одному маршруту, одно повреждение может вывести из строя оба подключения. -
Устанавливать шкаф вплотную к стене.
После заполнения оборудованием сервисный доступ становится неудобным или невозможным. -
Оставлять мониторинг на последний этап.
Во время запуска выясняется, что подключение контроллера к корпоративной сети требует дополнительных согласований. -
Не учитывать дальнейшее развитие системы.
Площадка подходит для стартовой конфигурации, но не позволяет увеличить электрическую или тепловую нагрузку.
```
Что проверить перед вводом в эксплуатацию
После завершения монтажа недостаточно убедиться, что серверы получили питание и система охлаждения запустилась. До передачи микроЦОД в постоянную эксплуатацию необходимо проверить штатные и предусмотренные проектом аварийные режимы.
Электропитание
- правильность подключения;
- состояние защитных устройств;
- заземление;
- распределение нагрузки;
- работу ИБП;
- переход на аккумуляторное питание;
- возврат к нормальному режиму после восстановления сети.
Охлаждение
- запуск климатического оборудования;
- поддержание требуемой температуры;
- правильность организации воздушных потоков;
- отсутствие препятствий для вентиляции;
- работу отвода конденсата;
- формирование аварийных уведомлений.
Сетевые подключения
- доступность основных каналов;
- работу резервных линий;
- корректность маркировки;
- доступ системы мониторинга;
- удалённое управление, если оно предусмотрено.
Мониторинг
- датчики температуры;
- датчики влажности;
- контроль состояния дверей;
- контроль протечки;
- контроль задымления;
- состояние ИБП;
- состояние климатической системы;
- доставку уведомлений ответственным сотрудникам.
Итог
Подготовка объекта под микроЦОД начинается задолго до доставки оборудования. Сначала необходимо согласовать конфигурацию, определить место установки и проверить, можно ли физически доставить шкаф в нужную точку.
Отдельного внимания требуют пол и перекрытия. Следует учитывать массу всей системы вместе с IT-оборудованием и аккумуляторами, а при использовании фальшпола — дополнительно проверять его допустимую нагрузку.
Электропитание подготавливают под фактическую конфигурацию. Необходимо заранее определить требуемую мощность, способ подключения, защиту, заземление и сценарий работы при исчезновении внешней сети.
Сетевые подключения также желательно подготовить до монтажа. Следует определить количество медных и оптических линий, основной и резервный маршруты, точки коммутации и способ подключения системы мониторинга.
Несмотря на собственную климатическую инфраструктуру микроЦОД, площадка должна обеспечивать корректный отвод выделяемого тепла. Место размещения элементов системы охлаждения, трассы и отвод конденсата необходимо согласовать до поставки оборудования.
Не менее важно оставить пространство для обслуживания. Двери должны свободно открываться, а специалист — иметь возможность заменить сервер, аккумулятор или компонент охлаждения без перемещения всей системы.
При выборе микроцод в Минске следует оценивать не только характеристики самого шкафа, но и условия будущей эксплуатации: доступную мощность объекта, маршрут доставки, параметры помещения, сетевую инфраструктуру и возможность дальнейшего масштабирования.
Грамотно подготовленная площадка сокращает количество переделок во время монтажа и позволяет быстрее перейти от доставки оборудования к пусконаладке и рабочей эксплуатации.
Часто задаваемые вопросы
Можно ли установить микроЦОД в обычном офисном помещении?
В некоторых конфигурациях это возможно. Однако необходимо проверить требования конкретного решения к электропитанию, охлаждению, температуре окружающей среды, основанию, физической безопасности и сервисному доступу. Само наличие свободного места ещё не означает готовность площадки.
Нужно ли отдельное помещение для микроЦОД?
Не всегда. Одно из преимуществ интегрированного решения заключается в размещении основных инженерных систем внутри компактной инфраструктуры. При этом выбранное место всё равно должно обеспечивать электропитание, теплоотвод, безопасность и возможность обслуживания.
Что нужно проверить до доставки микроЦОД?
Необходимо проверить весь маршрут доставки, размеры дверей и лифтов, пространство для поворотов, грузоподъёмность, состояние основания, сервисные зоны, электропитание, сетевые линии и готовность коммуникаций системы охлаждения.
Можно ли подключить микроЦОД к существующей электрической линии?
Это зависит от параметров линии и конкретной конфигурации. Для критичной IT-инфраструктуры электроснабжение следует рассчитывать исходя из фактической мощности оборудования, характеристик ИБП, защитной аппаратуры и требований к резервированию.
Нужен ли отдельный кондиционер в помещении с микроЦОД?
Это зависит от конструкции микроЦОД и условий площадки. Интегрированная система может самостоятельно охлаждать внутренний объём шкафа, однако выделяемое тепло всё равно необходимо отводить, а температура окружающей среды должна оставаться в допустимых пределах.
Нужно ли заранее прокладывать сетевые кабели?
Да. До монтажа желательно определить количество линий, типы соединений, основной и резервный маршруты и место ввода кабелей в шкаф. Это упрощает запуск и снижает вероятность появления временных кабельных решений.
Почему вокруг микроЦОД необходимо оставлять свободное пространство?
Свободная зона нужна для открытия дверей, установки и демонтажа серверов, обслуживания ИБП, аккумуляторов, распределения питания и системы охлаждения. Недостаточный сервисный доступ значительно усложняет дальнейшую эксплуатацию.
Когда нужно согласовывать требования к площадке?
Оптимально делать это после определения базовой конфигурации микроЦОД, но до завершения электромонтажных, строительных и отделочных работ. Тогда требования к питанию, охлаждению, сетевым трассам и размещению можно учесть без последующих переделок.