Заказчики: Дальневосточное морское пароходство (ДВМП) Подрядчики: Акцент Продукт: ЦОД Проекты создания и модернизацииДата проекта: 2009/01 — 2012/01
|
Технология: Центры обработки данных - технологии для ЦОД
|
Завершен трехлетний проект по модернизации ЦОД для ОАО «Дальневосточное морское пароходство»
В результате долгой кропотливой работы нами был создан центр обработки данных (ЦОД) на 40 киловатт полезной нагрузки с возможностью расширения до 60 киловатт, защищенный от воздействия внешних угроз, таких как затопление и пожар.
Сухие цифры:
- Площадь ЦОД – 48 кв м;
- Количество рядов стоек – 3
- Количество изолированных «горячих» коридоров - 1
- Минимальная степень отказоустойчивости каждого элемента – N+1
- Общее количество стоек – 13
- Количество стоек для полезной нагрузки – 10 (возможность расширить до 12);
- Средняя плотность нагрузки на стойку – 5 кВт
- Максимальная возможная плотность нагрузки на стойку – 10 кВт
- Максимальная мощность основного ИБП – 160 кВт
- Мощность вспомогательного ИБП – 14 кВт
- Время работы всех систем от ИБП – 45 минут
- Мощность системы кондиционирования – 50 кВт (возможность расширения до 70 кВт)
- Количество АВР – 2
- Количество вводов от ТП - 2
- Количество ДГУ – 2
Изначально Заказчик располагал техническим помещением площадью около 100 квадратных метров с 16 стойками различных производителей и потолочными системами кондиционирования. В этом помещении ранее располагалась советская ЭВМ ЕС, от которой остался только фальшпол и металлическая отделка стен и потолка. В помещении электрощитовой имелись два ИБП. Слабыми местами серверного помещения было отсутствие защиты от затопления, не резервированная система распределения питания, невозможность сделать систему пожаротушения.TAdviser Security 100: Крупнейшие ИБ-компании в России
Одним из основных условий работы было отсутствие возможности выключать оборудование на срок более четырех часов не чаще, чем раз в квартал.
Предложенное нами решение и технология производства работ позволили реализовать все пожелания Заказчика.
Решение состоит из трех функциональных зон: защитного саркофага с оборудованием, зоны коммутации СКС и электрощитовой.
Саркофаг выполнен в виде капитального несущего борта высотой 400 мм, образующее своеобразное «корыто» с фальшполом внутри, металлического несущего каркаса, стен и крыши из специальных огнестойких сэндвич-панелей. Данное сооружение выдерживает пожар снаружи в течение минимум 60 минут без изменения температуры и состава воздуха внутри, противостоит затоплению на высоту подъема воды до 350 мм в течение шести часов и вертикальным потокам воды без ограничения по времени воздействия.
Строительство велось в три этапа. Для проведения работ создавалась временная гермозона, изолированная от остального помещения.
Саркофаг оборудован системой газового пожаротушения, контроля доступа, видеонаблюдения, приточной и вытяжной вентиляции (совмещенной с аварийным дымоудалением). В системе газового пожаротушение применено не токсичное огнетушащее вещество – газ Novec производства компании 3М. Особенностью этого газа является высокий срок службы и возможность ремонта системы без выпуска огнетушащего вещества – Novec при комнатной температуре находится в жидкой фазе, а для его выпуска из баллона применяется азот под давлением. По сравнению со стандартными Хладонами Novec служит в три раза дольше – 15 лет.
Система вентиляции и дымоудаления обеспечивает плановый воздухообмен, необходимый для безопасной работы персонала внутри. При подготовке воздуха он проходит через несколько фильтров и нагревается до температуры 20 градусов Цельсия. В случае необходимости (работа системы пожаротушения, задымление) систему можно включить на полную мощность принудительно.
Питание освещения, вентиляции и дымоудаления, системы видеонаблюдения осуществляется от отдельного ИБП, расположенного в помещении электрощитовой. Это необходимо для работы этих устройств в случае работы системы пожаротушения, т.к. основной источник питания в этот момент отключается.
Система видеонаблюдения позволяет минимальным количеством камер охватить все рабочее пространство серверной и ее окружения. Применение высококачественных видеокамер с ИК подсветкой дает отличное изображение даже при выключенном освещении. Изображения камер выводятся на монитор охраны, записи хранятся на видеорегистраторе. Это позволяет как оперативно контролировать состояние помещения серверной и предупреждать возникновения пожара, так и разрешать потенциально возможные инциденты, связанные с физическим доступом в помещения.
Внутри саркофага установлено основное оборудование, состоящее из трех рядов стоек. Два ряда стоек предназначены для размещения полезной нагрузки. Каждый ряд состоит из четырех шкафов APCAR3100 и двух прецизионных кондиционеров APCInROWRD. В стойки выведено от двух до четырех независимых фидеров электропитания и установлены панели распределения с функцией удаленного мониторинга.
Первый ряд стоек служебный и состоит из ИБП Symmetra PX2 160кВт с батарейным массивом, шкафа распределения питания, кондиционера APC InROW RD и шкафа для обслуживающего и не выделяющего тепла оборудования (КВМ, сервера мониторинга, стримеров и т.д.).
ИБП подключен к устройству автоматического ввода резерва производства APC. К этому же устройству подключены генераторы и второе устройство автоматического ввода резерва собственного производства. Оно осуществляет выбор между городскими вводами в соответствие с установками персонала. Состояние этого АВР с помощью релейных контактов передается в основной АВР, который оборудован средствами сетевого контроля.
Прецизионные кондиционеры APC InROW RD объединены в группу. Это дает возможность централизованно управлять всей системой и в случае выхода из строя одного из компонентов быстро увеличить выходную мощность на оставшихся без увеличения температуры внутри ЦОД. Применение прецизионных кондиционеров позволяет более эффективно охлаждать оборудование. Главная особенность подобных систем – возможность работать при очень низких температурах уличного воздуха, т.к. компрессор располагается во внутреннем блоке.
Отдельно стоит отметить внедренную систему мониторинга и управления ЦОД APC ISX Central.
Система состоит из специализированного сервера с программным обеспечением и разнообразных датчиков. Все устройства APC (их более 60) подключаются в отдельную локальную сеть, а сервер производит сбор и обработку данных. Наличие единой системы позволяет наиболее полно уведомлять персонал о происходящих событиях и избавляет от необходимости контролировать каждое устройство по отдельности.
Контролируемые параметры:
- наличие жидкой воды на полу;
- Элемент маркированного спискавлажность;
- Элемент маркированного спискатемпература по стойкам спереди и сзади, на батареях, на ИБП;
- Элемент маркированного списканагрузка по стойкам и панелям, общая нагрузка;
- Элемент маркированного спискавсе возможные аварии и ошибки и изменение состояния.
Стоит добавить, что при покупке дополнительных лицензий функционал решения мониторинга может быть существенно расширен – вплоть до планирования возможного места установки нового оборудования и прогнозирования замены старого.
В результате проделанной работы Заказчик получил современное масштабируемое решение в соответствие с изначально установленными требованиями.
Отдельно необходимо отметить, что строгое планирование Заказчиком бюджета и его безоговорочное соблюдение сделали работу над этим проектом очень комфортной. Вполне вероятно, именно это и привело к отличному результату!
Виктор Танин, начальник отдела эксплуатации и развития инфраструктуры Филиала ОАО «ДВМП» в г. Владивосток: «Компания «Акцент» провела необходимые для модернизации ЦОД работы, учитывая все наши требования и пожелания. В результате мы получили надежный отказоустойчивый ЦОД для размещения необходимого для функционирования компании оборудования.»
Евгений Толмаков, менеджер по работе с партнерами по ДВФО Schneider Electric: «Успешная реализация подобного проекта лишний раз подтвердила способность специалистов «Акцент» успешно решать самые не стандартные задачи. Этот проект можно считать одним из самых интересных в Дальнем Востоке за последние годы»