Тремя основополагающими факторами бесперебойной работы Дата-центра являются электроснабжение, охлаждение и системы пожарной безопасности. И именно электроснабжение, вне всякого сомнения, является ключевым фактором, влияющим на время простоя ЦОД.
Основные элементы инфраструктуры электропитания ЦОД для предотвращения простоев.
Внезапное отключение электроэнергии может полностью остановить работу центра обработки данных. Перебои в подаче электроэнергии негативно сказываются на работе ИТ-систем, поскольку отключение может привести к потере данных, повреждению файлов и повреждению оборудования. Для центра обработки данных необходима система резервирования, интегрированная непосредственно в инфраструктуру электропитания, чтобы гарантировать бесперебойную работу оборудования, даже если основные линии электропитания будут недоступны.
Энергетическая инфраструктура ЦОД’а компании Юбилинк имеет два режима работы: обычный и аварийный.
В обычном режиме ЦОД подключен по двум независимым вводам от городской электросети.
В аварийном режиме резервное электроснабжение ЦОД’а осуществляется при помощи собственных генераторов, подавая ее в виде переменного тока, как и основная электросеть.
В ЦОД компании Юбилинк установлены автоматические переключатели между источниками питания (основным и резервным). Если основной источник питания становится недоступным, переключатель передает команду запуска на подключенный генератор, а затем переключается на вторичное питание, когда генератор начинает вырабатывать электроэнергию. После восстановления первичного питания переключатель снова переключается на основное питание и передает команду на отключение генератора.
Энергетическая инфраструктура ЦОД компании Юбилинк включает в себя два источника бесперебойного питания (ИБП), с подключенными к ним аккумуляторными батареями, а также дизель-генераторную установку. В случае отключения основного источника питания аккумуляторные батареи обеспечивают до 30 минут автономной работы, пока не запустится дизель-генераторная установка. ИБП выполняют две важнейшие задачи: защищают оборудование от скачков напряжения и обеспечивают кратковременное питание при отключении электроэнергии.
Другим компонентом инфраструктуры электропитания является блок распределения питания (PDU), который представляет собой розетку, получающую питание от ИБП и затем распределяющую его по оборудованию. PDU не генерирует энергию и не защищает от скачков напряжения, поэтому он используется вместе с ИБП.
Регулирование и маршрутизация питания в ЦОД Юбилинк осуществляется с помощью распределительных устройств или главных распределительных щитов, а также трансформаторов. Это обеспечивает подачу питания нужного напряжения и тока.
Обеспечение непрерывной работы
Энергетическая инфраструктура ЦОД Юбилинк поддерживает такие системы, как освещение, сигнализация, датчики, пожарные мониторы, холодильные установки и осушители воздуха. Инфраструктура обеспечивает электроэнергией ИТ-системы, такие как серверы, устройства хранения данных и сетевые компоненты, чтобы они могли работать без перебоев, даже если отключится электричество.
Электроэнергия, предназначенная для ИТ-систем, непрерывно проходит через ИБП во время обычных операций. ИБП гарантирует, что подключенные батареи остаются полностью заряженными и готовыми к поддержке аварийных операций. Батареи обеспечивают достаточную мощность для поддержания работы ИТ-систем, а также систем объекта в течение короткого времени – до пятидесяти минут.
Резервный генератор ЦОД Юбилинк работают на дизельном топливе. Запас топлива в баке гарантирует непрерывную работу ЦОД в течение 12 часов. Через 8 часов непрерывной работы осуществляется дозаправка дизель-генераторной установки.
Проактивное планирование на случай отключения электроэнергии
В ЦОД компании Юбилинк проводится регулярное обслуживание и тестирование (1 раз в 2 недели) оборудования резервного электроснабжения.
Для тестирования системы распределения электроэнергии подается тестовая нагрузка и каждый автомат в распределительном щитке отключается и включается. Начиная с сетевого оборудования происходит обход каждой стойки, создается таблица и инженеры компании Юбилинк следят за тем, чтобы при отключении автомата выключалось соответствующее оборудование.
Для кондиционеров, дизель-генераторных установок и источников бесперебойного питания производятся автономные проверки: отключение и включения питания, режим работы оборудования, настройка и пр. Немаловажным фактором является то, насколько хорошо закреплено оборудование
Рассмотрим алгоритмы тестирования и проверки каждого узла электроснабжения:
Холодоснабжение:
– Соответствие требованием установки (визуальный осмотр)
– Изоляция и стыковка (изоляция и стыковка)
– Надежность крепления в электрощите (автоматы, колодки контактов, магнитные пускатели)
– Работоспособность панели управления
– Алгоритмы работы ПО оборудования (имитация аварийной ситуации для проверки переключение с обычного режима на аварийный)
Электроснабжение:
– Соответствие требованием установки (визуальный осмотр)
– Соответствие системы и ее компонентов схеме
– Выборочные замеры температур бесконтактным методом, с указанием мест.
Дизель-генераторная установка:
– Проверка панели управление и контроля
– Корректность работы световой и звуковой индикации
– Проверка дизель-генераторной установки в автоматическом и ручном режимах при тестовом запуске
– 6-тичасовая проверка дизель-генераторной установки на 30% проектной нагрузке
Источники бесперебойного питания:
– Автостарт источников бесперебойного питания, проверка времени автономной работы (замеры происходят при 100% проектной нагрузки)
– Сравнение основных параметров источников бесперебойного питания при 100% нагрузке
– Контроль вывода источником бесперебойного питания в режиме «обхода» в автоматическом и ручном режимах при 100% проектной нагрузке.
После заверения тестирования и проверки каждого узла наступает время комплексной проверки. Все комплексные проверки производятся под нагрузкой. Для этого в зале с оборудованием устанавливаются тепловые пушки, которые начинают «прожигать» помещение, таким образом достигается качество работы инженерных систем.
Важно отметить, что основным источником питания ЦОД компании Юбилинк является дизель-генераторная установка. Город является альтернативным «дешевым» источником питания для ЦОД, поэтому проверка комплексных систем производится на дизель-генераторной установке.
А теперь рассмотрим способ проверки, который использует компания Юбилинк в своем ДЦ
- Выполняем переход с городской электросети на дизель-генераторную установку, производим замер показателей
- После проверки дизель-генераторов, не переходя на городской источник электроэнергии, производим остальные тесты питания.
- Производим выключение одного источника бесперебойного питания и смотрим как перераспределяется электроэнергия. Переводим ИБП в «обходной» режим и обратно, разряжаем аккумуляторы
- Последовательно идем по схеме и отключаем распределительные щиты
После проверки дизель-генераторной установки переходим к системе кондиционирования. Поочередно отключаем кондиционеры, при наличии у них встроенной системы АВР, проверяем и ее.
Так же в ЦОД компании Юбилинк в обязательном порядке тестируется питание мониторинга систем. Поскольку всегда должен быть 100%контроль над ЦОДом чтобы моментально отреагировать на внештатную ситуацию.