ЦОД в Ярославле: инженерные решения для бесперебойной работы

4 апреля 2012


Сама идея строительства большого дата-центра в Ярославле вызвала оживление среди технических специалистов. Задача — создание оптимального по площадям и максимально эффективного технического сооружения.

ДДИБП

Вот заданные параметры:

  • Среднегодовой показатель Power Usage Effectiveness не должен превышать 1,3 при потреблении одной стойки около 20 кВт;
  • Должна быть возможность поэтапного (модульного) строительства;
  • Категория надежности электроснабжения по требованиям UPTIME INSTITUTE – TIRE 4 (100% дублирование узлов);
  • ЦОД должен быть удобным в эксплуатации.

Ещё вводные: система охлаждения должна продолжать работу даже после отключения основного питания, плюс кейс дожен быть экономически-обоснованным. Про другие условия можно прочитать в предыдущем топике про строительство дата-центра.

Выбор решения

В качестве источников гарантированного и бесперебойного электроснабжения решили применить ДДИБП(дизельный динамический источник бесперебойного питания), он же Flywheel UPS или DRUPS. Технология применялась ещё в СССР и носила название УГП (установка гарантированного питания). Принцип работы машины основан на обеспечении вращения альтернатора (синхронной обратимой электрической машины), которая может работать в режиме мотора или генератора.

Непрерывность вращения электрической машины во время проблем с внешним питанием обеспечивается за счет накопленной кинетической энергии. В качестве накопителя кинетической энергии используется громадный маховик прикрепленный к валу обратимой машины.

Маховики в качестве накопителей кинетической энергии используются в ДДИБП, ограничиваясь линейкой в 1 МВт. В более мощных устройствах ДДИБП имеют применение так называемые кинетические модули. Работа этих устройств основана на сочетании механических и электрических принципов.

Как это работает

При наличии удовлетворительного внешнего питания (из города)

  1. Синхронная электрическая машина (альтернатор — 3) вращается на холостом ходу в режиме электрического мотора;
  2. Кинетический модуль (накопитель энергии — 4) вращается на одном валу с синхронной электрической машиной (альтернатором);
  3. Дизель (1) с подогретым картером находится в режиме ожидания быстрого старта;
  4. Сцепление (2), соединяющее дизель с электрическими машинами, разомкнуто;
  5. Дроссель (5), используя энергию альтернатора «чистит» питание и на выходе получается почти идеальная синусоида.
  6. Байпасный автомат (9) разомкнут.

Если внешнее питание пропадает или становится неудовлетворительным
Раскрученный маховик по инерции продолжает вращаться, отдавая накопленную кинетическую энергию синхронной электрической машине. Она, в свою очередь, из режима электрического мотора переходит в режим генератора и вырабатывает электричество к потребителю.

  1. Кинетический модуль (накопитель энергии — 4) вращается и продолжает вращать синхронную электрическую машину (альтернатор — 3);
  2. Дизель (1) получает команду старт и раскручивается до необходимой скорости;
  3. Включается сцепление (2), соединяя вал дизеля с валом электрической машины;
  4. Электрическая машина продолжает вращаться за счет энергии дизеля;
  5. Кинетический модуль (накопитель энергии — 4) вращается, накапливая энергию.

Потребители электрической энергии продолжают получать электричество, не замечая проблему.

По статистике производителей ДДИБП, 98% инцидентов с внешним электричеством носит кратковременный характер, и времени автономии ДДИБП на раскрученном маховике достаточно для их устранения. Проблемы, которые носят более длительный характер, сопровождаются запуском и подключением дизельного двигателя к электрическим машинам путем сцепления муфты.

12 «за»

  1. Единичная система способна зарезервировать большую мощность;
  2. Просто в эксплуатации (особенно важно в регионах);
  3. Не требует установки кондиционеров для охлаждения (экономим на кондиционерах и мощности для них);
  4. Низкие операционные затраты на содержание в эксплуатации;
  5. Высокий КПД при минимальном объеме загрузки (практически линейный график от 40%);
  6. Минимальное количество силовой электроники.;
  7. Высокая наработка до вывода в капитальный ремонт (10 лет);
  8. Не требует резерва мощности для заряда аккумуляторных батарей (10-15% от объема мощности потребления систем ИБП);
  9. Устойчив к токам короткого замыкания;
  10. По стоимости сопоставимы с классическими системами гарантированного и бесперебойного питания применяемыми в современных ЦОД;
  11. Занимает меньшую площадь чем классический статический ДДИБП.
  12. На холостом ходу работает, как синхронный компенсатор.

На последнем остановится чуть подробнее. Перевозбуждённый синхронный двигатель на холостом ходу применяют в качестве компенсатора реактивной мощности. Мы получаем возможность не оплачивать реактивную составляющую электрической мощности, компенсируя ее применением ДДИБП.

Что такое активная и реактивная мощность?

В большинстве случаев электрические цепи содержат как активное, так и реактивное сопротивление. В цепях с активным сопротивлением электрическая энергия полностью преобразуется в тепло, совершая полезную работу. Единица измерения Ватт (Вт). В цепях переменного тока, содержащих наряду с активными сопротивлениями индуктивные и емкостные нагрузки, имеют место потери на реактивную мощность, обусловленную наличием магнитных и электрических полей в электрических цепях. Условно эта мощность не расходуется на полезную работу. Единица измерения вольт-ампер реактивный (вар) или киловольт-ампер реактивный (квар).

Учитывая, что ЦОД в Ярославле строится, как ранее писалось, у стен пивного завода Ярпиво, для наглядности можно рассмотреть пример на бокале пива. Бокал наполнен слоем бесполезной пены (реактивной мощности). Мы платим за нее в составе выпитого пива, но полезную работу выполняет только объем активной жидкости (активной мощности).


Сумма активной и реактивной мощности, — полная мощность.

Отношение активной мощности электрической цепи к полной мощности принято называть коэффициентом мощности или «косинусом фи» (cos φ):

Коэффициент мощности = Активная мощность/Полная мощность

Коэффициент мощности не может быть больше единицы. В случае, если активная мощность равна полной мощности, а это говорит об отсутствии реактивной нагрузки, cos φ = 1 (единице). Для практического примера,- cos φ сервера = 0,95, а cos φ кондиционера = 0,7. Отсюда уже видно, сколько в процентах заплатим за пену).

Практический выбор

При исследовании рынка мы выяснили, что передовых производителей, чье оборудование установлено в ЦОД всего четыре, все расположены на территории европейских стран.

  1. Piller – Германия
  2. Hitec – Голандия
  3. Hitzinger – Австрия
  4. Evrodisel – Бельгия

Все работают в больших диапазонах мощностей, имеют хорошую производственную базу, все представлены в ЦОДах и имеют положительную историю и отзывы. Соответственно конкурентная среда есть.

Интересные конструктивные особенности

Hitzinger, Evrodisel, Hitec

ДДИБП данных производителей имеют классическую схему размещения агрегатов (соосно). Кинетический накопитель двухопорный. Имеет жесткое соединение с альтернатором.

Вот так выглядит:

Преимущества: простота и минимальное количество силовой электроники.

Piller
Он работает по тому же примерно принципу, что и классические ДДИБП – но накопитель кинетической энергии не размещен на одной раме с остальными компонентами устройства. Кинетический накопитель имеет вертикальное расположение, по принципу «волчка». В данных устройствах применяется не механическая связь агрегатов а электрическая.

Принципиальная схема:

Выглядит это так:

Преимущества: кинетический накопитель может быть установлен отдельно от самого силового агрегата, накопитель помещен в герметичную оболочку заполненную газом, таким образом снижено сопротивление, что позволяет увеличить время автономии без запуска дизеля.

А вот фотографии устройств в реальности (не в нашем ЦОД):

Источник: Блог компании ВымпелКом (Билайн) на habrahabr.ru

Всего комментариев: 4

  • АК
    Автор: АК Добавлено 4 апреля, 2012 в 15:02

    Опять маркетологи пишут,а не технические специалисты ))

    Просто в эксплуатации (особенно важно в регионах)
    Я все хочу увидеть (но почему то никто не показывает ) систему синхронизации этих ИБП.
    Особенно актуально для IV тира и неквалифицированного персонала при выводе в ремонт на работающем ЦОДе . Не просто перевод на байпас , а именно на второй работающий ИБП .

    Низкие операционные затраты на содержание в эксплуатации;
    Какова там периодичность замены щеток ? И сколько специалистов по этим ИБП есть у нас в стране ?

    Высокая наработка до вывода в капитальный ремонт (10 лет);
    Не требует резерва мощности для заряда аккумуляторных батарей (10-15% от объема мощности потребления систем ИБП)
    Конечно,там генератор и так переразмерен

    Занимает меньшую площадь чем классический статический ДДИБП.
    Думаю что все же просто ИБП на 1 МВт занимает меньше места, а вот уже ДГУ и ИБП ,да больше чем один данный ИБП

    Ну и про минусы скромно промолчали 😉

    Ответить
  • Skip
    Автор: Skip Добавлено 4 апреля, 2012 в 18:56

    Андрей, так там если опечатки типа TIRE 4 против Tier IV встречаются, то все понятно.
    На самом деле, статья на уровне обзорного реферата школьника или студента младших курсов, который в теме не бум-бум, но вот дали задачу. Не скажу про копивио, но некоторые части резанули глаз, уже такие сравнения и описания попадались. И конечно америкосов жалко ))) все производители этого счастья — европейцы )))

    Ответить
  • Skip
    Автор: Skip Добавлено 4 апреля, 2012 в 19:03

    А я чего-то пропустил или сервера позеленели и теперь их импульные блоки питания дают косинус Фи = 0.95?

    Ответить
  • АК
    Автор: АК Добавлено 9 апреля, 2012 в 10:51

    2 Skip
    Из того что реально видел лично по БП серверов :есть и с косинусом Фи = 0,98.
    Где то даже картинки с Флюка остались..

    Ответить

Оставить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *