Как проектируют дата-центры vol.2: земля и электричество

После того, как вы определитесь с параметрами отказоустойчивости и безопасности будущего дата-центра, переходите к выбору участка. Здесь стоит провести аналитику о наличии свободой земли и инженерной инфраструктуры.

Вероятно, для этого лучше воспользоваться услугами специальных агентств, и не просто риелторов, а специализированных компаний, оказывающих услугу проектирования дата-центров «под ключ». Выбирая такого подрядчика, важно проанализировать его предыдущий опыт, узнать о том, какие успешные проекты были им реализованы ранее, как долго они работают и были ли в практике этого ЦОД впоследствии сбои и нарушения. Специалисты должны помочь подобрать свободный для выкупа или аренды участок, подходящий по площади и окружающей его инженерной инфраструктуре. Нелишним будет узнать и то, какие предприятия и строения окружают будущее место стройки.

Важно продумать все моменты, включая:

· Удобство логистики и транспортную доступность — то, как быстро и удобно вы сможете доставлять к требуемому месту стройматериалы и оборудование (то же касается ремонтов и обновления после запуска ЦОД), определит вашу конкурентоспособность по сравнению с другими компаниями. Поэтому ЦОД нужно размещать рядом с магистралями, продумывая подъезды для грузового транспорта;

· Возможность быстро пополнять запасы топлива для ваших резервных систем электропитания, ведь промедление в несколько минут в нашем деле может стоить миллионы рублей;

· Средства обеспечения связи — запуская ЦОД, важно предусмотреть наличие резервных каналов связи (несколько операторов). Предусмотрите возможность подключения не менее чем к двум провайдерам связи с физическим разнесением трасс. Так можно будет избежать проблем при отключении одного из них;

· Высокую отказоустойчивость. Для этого нужно предусмотреть средства резервирования и предотвращения аварийных ситуаций;

· Внешние факторы, включая посторонние шумы, если вы находитесь рядом с производством или крупной трассой, вибрации, которые могут повлиять на оборудование и устойчивость конструкций. Стоит обратить внимание и на вероятность наводнений, если вы находитесь рядом с какой-либо акваторией;

· Возможность организации охраны периметра вашего ЦОД – абсолютно очевидная в наши дни необходимость. Попадание на территорию дата-центра посторонних должно быть полностью исключено;

· Возможность расширения и масштабирования. Всегда оставляйте задел на будущее, особенно, с учётом бешеного роста спроса на услуги ЦОД. Те мощности, на которые вы рассчитываете сегодня, могут стать недостаточными завтра.

При проектировании ЦОД важно учесть вопрос жизненной необходимости дата-центра: системы резервирования электропитания. То, как тщательно вы продумаете архитектуру электроснабжения, впоследствии будет сильно влиять на все процессы. Для начала вам нужно понять, от какого источника будет запитываться ваш ЦОД. Кстати, надёжное резервирование электропитания – один из критериев отказоустойчивости ЦОД для четырёх стандартов Tier. Подробнее об этом писали здесь:

При относительно небольшой мощности и в случаях, если вы планируете расположить дата-центр в промышленном центре, вы можете выбрать местную подстанцию. Это сократит издержки на прокладку сетей, но добавит расходов на оплату электричества.

Значительно дешевле будет киловатт электроэнергии, если вы подключитесь к районной подстанции. Но для этого вам потребуется проложить собственные линии электропередач и обустроить распределительную подстанцию. Пожалуй, самым приемлемым для надёжных ЦОД является вариант подвода электричества от разных подстанций. Дизель-генераторы используются дата-центрами как резерв, а не постоянный источник питания.

Например, произошла авария, ввод сразу же переключается на другую подстанцию, а аккумуляторные батареи страхуют на время переключения. Если отключаются сразу два ввода, то аккумуляторные батареи страхуют на время запуска дизель-генератора, далее стараются "реанимировать" основные городские вводы электроэнергии. Поэтому метод собственной генерации (дизель-генераторы), не существует сам по себе, а является обязательным дополняющим элементом для основного способа электропитания.

Представим, что в городе наступает блэкаут. И пока власти и ресурсники будут решать проблему аварии, ваш ЦОД будет продолжать бесперебойно оказывать клиентам услугу, ни у кого ничего не зависнет и не «упадёт». А все потому, что вы предусмотрели схемы резервирования.

Системы бесперебойного снабжения электроэнергией — один из «трёх китов» (помимо средств связи и оборудования), на которых держится надёжность работы ЦОД. Особенность здесь заключается в наличии в ЦОД большого количества оборудования, требующего колоссальных энергозатрат.

Наш многолетний опыт подсказал нам, что все инструменты резервирования нужно использовать в комплексе одновременно. В ЦОД важно соблюдать принцип разнесения оборудования или изоляции некоторых элементов друг от друга во избежание негативного взаимного влияния. К нему же относится дублирование схем электроснабжения (например, от двух независимых подстанций), охлаждения, инженерных систем, резервное копирование по защищённым каналам. Если какая-то из «близнецов» выходит из строя, вторая часть берёт на себя всю ответственность. Этот принцип сравним с наличием двух двигателей в самолёте.

Такой инструмент, как N+1 предусматривает установку как минимум одного дополнительного источника бесперебойного питания. Ещё на этапе проектирования можно выяснить уровень нагрузки на каждый элемент, чтобы рассчитать возможные риски и затраты. Принцип резервирования N+1 (или N+х, где х — любое необходимое дополнительное число ИБП) удобен тем, что можно масштабировать нагрузки и варьировать использование элементов в зависимости от потребностей.

Система резервирования 2N предусматривает двукратное увеличение или полный дубль всех элементов системы электроснабжения. Для того, чтобы увеличить степень отказоустойчивости такой системы, источники питания могут размещать в разных помещениях.

Резервирование применяется системно: электроснабжение (UPS, генераторы, вводы), охлаждение, сеть, маршруты связи. Из этой цепочки невозможно выключить какой-то один компонент.

Наша компания не без основания гордится собственным дата-центром. Инженерные и информационные инфраструктуры были заложены еще на этапе проектирования здания нашего бизнес-центра. Была обеспечена возможность параллельного обслуживания инженерных подсистем, то есть мы можем проводить все плановые работы (ремонт и профилактика) без остановки Центра обработки данных. ESTT использует в своей работе самое современное оборудование. Кстати, если вы хотите начать сотрудничество, мы можем провести для вас экскурсию по нашему дата-центру. Напишите мне и мы обсудим все детали.

В следующих публикациях мы подробнее расскажем о других принципах резервирования и способах охлаждения вашей аппаратуры.