Проектирование центров обработки данных: архитектура системы электропитания, резервирование и меры защиты, которые чаще всего упускаются из технических спецификаций

Большинство руководств по проектированию центров обработки данных начинаются с описания того, что находится в помещении. Это руководство же начинается с того, какие решения необходимо принять на этапе проектирования. При проектировании системы электропитания те решения, которые вы принимаете ещё до начала черчения, определяют, сможет ли объект оставаться в рабочем состоянии и выдержит ли оборудование внутри первую же грозу. Перед вами пошаговое руководство по электрооборудованию, включая ту подсистему, с которой почти во всех технических заданиях допускаются ошибки.

Что необходимо определить при проектировании центра обработки данных до начала строительства

Самая дорогостоящая ошибка при проектировании центра обработки данных заключается не в неправильном выборе оборудования, а в том, что выбор оборудования производится до определения критериев. Согласно отраслевым исследованиям, цитируемым в техническом документе Schneider Electric по проектированию, средний возраст центра обработки данных составляет 9 лет (IDC), в то время как компания Gartner считает устаревшим любой объект, которому более 7 лет. Объекты выходят из строя не столько из-за некачественного строительства, сколько из-за того, что критерии проектирования никогда не устанавливались честно.

Прежде чем приступить к выбору площадки или планированию пространства, необходимо определить три ключевых момента. Целевой показатель доступности — это бизнес-решение, а не инженерное предпочтение. Большинство организаций с мощностью 1–3 МВт проектируют системы с избыточной мощностью, поскольку термин “Tier III” звучит надежнее, чем того требует реальность. Прогноз мощности основывается на реальном планировании рабочей нагрузки, а не на общем стандарте “300 Вт на квадратный фут”. Общая стоимость владения учитывается в последнюю очередь: ориентация исключительно на капитальные затраты (CapEx) — это ловушка, а обоснованная модель должна учитывать совокупность затрат на капитальное строительство, эксплуатацию и техническое обслуживание, а также энергозатраты.

Система уровней позволяет выразить этот целевой показатель доступности единым языком. Её классификация основана на Система классификации уровней надежности Uptime Institute, фактический международный стандарт производительности центров обработки данных:

Помимо «Uptime», в перечне стандартов, с которыми вам придётся сталкиваться неоднократно, фигурируют ANSI/TIA-942, EN 50600, IEC 60364 и ASHRAE 90.4. Цель этого перечня не в том, чтобы выучить его наизусть. Выберите уровень, а затем ориентируйтесь на стандарты, чтобы понять, какие требования должны выполняться каждой подсистемой.

Энергетический путь: от линии электропередачи до серверной стойки

Электроэнергия не “поступает” в центр обработки данных. Она проходит по определённой цепочке, и каждый этап этой цепочки имеет стандартный номер, тип отказа и определённые параметры расчёта. Если пропустить защиту или резервирование на любом из этапов, весь последующий участок цепочки подвергается риску.

Раздел «Среднее напряжение»: распределительные устройства и трансформаторы

Объекты с ИТ-нагрузкой свыше примерно 1 МВт получают электроэнергию от энергосистемы на среднем напряжении, которое в Европе обычно составляет 10–22 кВ, а в Северной Америке — 12,47–13,8 кВ. На объекте трансформаторы сухого типа с литой смолой понижают напряжение (Инженеры GBC, 2025). Входное распределительное устройство построено на основе вакуумных выключателей в соответствии с IEC 62271. Одно из изменений в нормативных требованиях, на которое следует обратить внимание: Регламент ЕС по фторсодержащим газам 2024/573 предусматривает постепенный отказ от распределительных устройств с использованием фторсодержащих газов с января 2026 года, что подталкивает европейских разработчиков к созданию альтернатив без использования SF† (Инженеры GBC, 2025 г.). При мощности ниже ~1 МВт объекты могут вообще обходиться без среднего напряжения.

Распределение низковольтного тока и переключение источников питания

При низком напряжении система разделяется на резервные цепи: 400/230 В в Европе, 480/277 В в Северной Америке. Ключевым устройством в данном случае является переключатель питания. Механические автоматические переключатели (ATS) обеспечивают переключение между сетевым питанием и генератором. Статические переключатели (STS), построенные на основе кремниевых управляемых выпрямителей, выполняют переключение менее чем за 4 миллисекунды (менее четверти цикла частотой 50 Гц), поэтому ИТ-оборудование этого даже не замечает (Инженеры GBC, 2025). Одно правило никогда не нарушается: переключение по принципу «сначала отключить, потом включить», поэтому энергия, вырабатываемая генератором, никогда не может поступать обратно в сеть.

Источники бесперебойного питания: «мост с нулевым временем задержки»

ИБП выполняет две функции. Он служит источником энергии в течение 5–15 секунд, необходимых для запуска генератора (phoenixNAP, 2025). Кроме того, именно этот фильтр качества электроэнергии поглощает провалы напряжения, скачки напряжения и дрейф частоты, прежде чем они достигнут серверов. Стандартной топологией для уровней Tier III/IV является система двойного преобразования (VFI в соответствии с IEC 62040-3), полностью изолирующая нагрузку от сети общего пользования. Выбор химического состава аккумуляторов — самое важное решение при выборе системы. Аккумуляторы VRLA дешевы при первоначальной покупке, но в условиях температур, характерных для центров обработки данных, служат всего 3–5 лет. Литий-ионные аккумуляторы, в частности LFP, служат 10–15 лет и занимают меньше места, однако требуют более строгой системы пожаротушения в соответствии с IEC 62619 (Инженеры GBC, 2025).

Расположение на этаже: PDU, RPP и шинопроводы

Напольные PDU, как правило, мощностью от 50 до 500 кВА, распределяют выходную мощность ИБП по защищенным ветвям с учетом потребления, а удаленные распределительные панели подают эту мощность ближе к стойкам (Инженеры GBC, 2025). Для объектов, где часто происходят изменения, в воздушных шинопроводах с номинальным током 250–6300 А в соответствии со стандартом IEC 61439-6 можно добавлять или перемещать отводные устройства без отключения питания магистрали. Набирает популярность тенденция к распределению питания при более высоком напряжении и понижению напряжения только на уровне ряда или стойки, что позволяет сократить потери в кабелях. Еще один момент, который в большинстве технических спецификаций по-прежнему упускается: в состав PDU должны входить устройства защиты от перенапряжений в соответствии с IEC 61643-11, о чем пойдет речь в следующем разделе.

Питание на уровне стойки: rPDU и «последний метр»

В стойке существует четыре класса PDU: базовые, с учетом потребления, с мониторингом по каждому розеточному гнезду и с коммутацией по каждому розеточному гнезду. Каждый из них обеспечивает более широкие возможности контроля за мощностью и удаленного управления (Инженеры GBC, 2025). Раньше под стандартным источником питания для стойки подразумевался однофазный источник на 16–32 А с разъемами IEC 60309 в Европе или NEMA L6-30P/L21-30P в Северной Америке; однако развертывание систем высокой плотности вынуждает использовать вместо них трехфазные rPDU на 60–100 А. Последний метр — это место, где проще всего допустить ошибку в проекте: все вышестоящие этапы могут быть дублированы, но даже одна удлинительная розетка с недостаточным сечением все равно выведет стойку из строя.

Защита от перенапряжений и ударов молнии: подсистема, которую в большинстве технических заданий описывают неверно

Вот тот пробел, который упускают из виду в большинстве материалов по проектированию центров обработки данных. Защита от перенапряжений в большинстве технических заданий упоминается всего одной строкой: “предусмотреть устройства защиты от перенапряжений (SPD)”, — но на практике эта защита не работает. Защита — это система, а не отдельное устройство. Она работает только при одновременном соблюдении трёх условий: многоуровневое размещение, правильное поведение при отключении и надлежащая основа заземления и соединительных проводов. Если упустить хотя бы одно из них, остальные два станут лишь украшением.

Многоуровневая защита: где следует использовать каждый тип SPD

Защита от перенапряжений построена по многоуровневой трёхступенчатой модели, основанной на двух испытательных сигналах. Устройства типа 1, испытанные на соответствие сигналу 10/350 мкс, характерному для прямых токов молнии, устанавливаются на главной входной линии питания. Устройства типа 2, испытанные на соответствие сигналу 8/20 мкс (типичная спецификация: I_20 = 20 кА / I_(max) = 40 кА), устанавливаются на распределительных щитах. Устройства типа 3 устанавливаются вблизи чувствительного конечного оборудования для защиты от небольших остаточных перенапряжений. Эталонным стандартом для всех них является МЭК 61643-11, посвященный низковольтовым устройствам защиты от перенапряжений переменного тока и методам их испытаний.

Внутри устройства работают две технологии: варисторы на основе оксидов металлов (MOV) быстро ограничивают напряжение и отводят основную часть энергии, а газоразрядные трубки (GDT) справляются с более высокими уровнями энергии и используются в паре с MOV в чувствительных системах. Выбор зависит от слоя и от требований стандарта к испытаниям, а не от маркетинговых слоганов.

Почему разъединитель решает всё

Устройство SPD защищает последующее оборудование, жертвуя собой, но только в том случае, если его отказ происходит безопасно. После того как устройство MOV поглощает сильный скачок напряжения, оно может перейти в режим короткозамыкания; в этом случае тепловой разъединитель должен четко размыкаться, отсоединяя неисправный компонент, разрывая оставшиеся паяные нити и позволяя дуговой камере погасить последующую дугу. В этом и заключается реальное различие между защитой и угрозой возгорания. Качественные устройства проходят оба противоречивых испытания, предусмотренных стандартом IEC 61643-11. Низкотемпературное паяное соединение является технологическим ядром этого баланса. Устройство, которое не отключается или отключается не полностью, продолжает проводить ток, нагревается и становится тем самым источником пожара, предотвратить который и было его целью. После реального удара устройство защиты от перенапряжения (SPD) не подлежит сбросу: его заменяют, и интервал замены показывает, была ли система защиты спроектирована или просто куплена.

Заземление и выравнивание потенциалов: необходимое условие, которое игнорируется в большинстве проектов

Многоуровневые устройства защиты от перенапряжений (SPD) и правильное отключение теряют смысл без выполнения третьего условия: заземления с выравниванием потенциалов по всему объекту. Импульсный ток следует за разностью потенциалов. Если стойки, корпуса и экраны кабелей не соединены с одним и тем же опорным потенциалом, импульс найдет свой собственный путь через ваше оборудование, а не через устройства SPD. Требования к соединчению должны быть включены в тот же технический документ, что и требования к устройствам защиты от перенапряжений (SPD), а не в отдельное приложение “Работы по заземлению”, прилагаемое позже. Кроме того, линии электропитания — не единственная точка входа: сигнальные и информационные линии, от сетей PoE до кабелей мониторинга и систем безопасности, являются второй «дверью» для внешних переходных процессов и нуждаются в собственных устройствах защиты линий, чтобы обеспечить целостность системы.

Охлаждение: воздушное, локализация в проходе и переход на жидкостное охлаждение

Охлаждение не относится к сфере электротехники, но является статьёй расходов в бюджете на электроэнергию: системы охлаждения могут потреблять до 40% от общего объёма энергии, потребляемой центром обработки данных (Инженеры GBC, 2025). Выбор конфигурации определяется плотностью размещения оборудования в стойке, и варианты образуют четкую иерархическую лестницу:

Воздушное охлаждение используется по умолчанию, поскольку оно всем хорошо известно. Жидкостное охлаждение служит запасным вариантом в тех случаях, когда плотность превышает плотность воздуха — об этом пойдет речь в следующем разделе.

«Beyond Power»: краткий обзор по размещению, безопасности и прокладке кабелей

Три оставшиеся подсистемы завершают объем проекта. При выборе площадки в первую очередь учитываются электроснабжение и оптоволоконная связь, а уже потом — стоимость земли: недорогая площадка без резервных линий электропередачи или доступа к сетям операторов связи обойдется в строительство дорогого здания. Физическая безопасность организована по принципу многоуровневой защиты: периметр, помещения и серверные стойки; системы контроля доступа и видеонаблюдения интегрированы в архитектуру, а не добавляются впоследствии. Прокладка кабельной сети должна соответствовать стандарту ANSI/TIA-942: быть структурированной, документированной и, в идеале, обслуживаться несколькими операторами, поскольку оператор-нейтральная связь — это фактор обеспечения работоспособности, столь же реальный, как и второй трансформатор. А мониторинг DCIM должен быть внедрен с самого первого дня; телеметрия покажет, эффективно ли работает система, ещё до того, как об этом сообщит сбой.

Как плотность мощности ИИ влияет на ваш проект

ИИ изменил правила игры. Плотность размещения серверных стоек — это не линейная задача: десятикратное увеличение мощности стоек сразу же сказывается на системах распределения электроэнергии, охлаждения и противопожарной защиты, и устранение неполадок только в одной из этих систем не решает проблему.

Цифры: стеллажи мощностью от 5 кВт до 100 кВт

Традиционные стойки с ЦП потребляют от 5 до 10 кВт. Стойки с ускорением на базе графических процессоров потребляют от 30 до 50 кВт, а крупные системы искусственного интеллекта превышают 80 кВт на стойку (Cisco, 2026). В крайнем случае в дискуссиях сейчас речь идет о 20 000 ампер в одной стойке, что выходит за рамки современных архитектур электропитания (Texas Instruments, 2025). По прогнозам DataCenter Dynamics, к 2025 году потребление энергии, связанное с ИИ, может составить половину общего энергопотребления центров обработки данных (Инженеры GBC, 2025).

Какие изменения происходят на каждом этапе энергетической цепочки

Проследите цепочку изменений, описанную в предыдущем разделе, — и вы увидите, что каждый этап претерпевает изменения. Приемная мощность среднего напряжения увеличивается в два-три раза. ИБП и генераторные установки перенастраиваются под профиль нагрузки, характеризующийся резкими скачками. Стационарные распределительные щиты уступают место шинопроводам, обеспечивающим постоянную перенастройку. PDU для стоек переходят на трёхфазное питание 60–100 А. Напряжение в распределительной сети также повышается: сеть 415/480 В прокладывается ближе к стойкам для сокращения потерь, а распределение постоянного тока 400 В становится ещё одним способом повышения эффективности (Инженеры GBC, 2025). Каждое изменение влечет за собой определенные последствия с точки зрения защиты: для более высоких напряжений и шин постоянного тока требуются собственные устройства защиты от перенапряжений с надлежащими номинальными параметрами, подбираемые с той же строгостью, что и для стороны переменного тока.

«Потолок охлаждения» и «момент жидкости»

Вся эта мощность в конечном итоге преобразуется в тепло, а тепло определяет предельное значение. Воздушное охлаждение эффективно при нагрузке примерно до 10–20 кВт на стойку и становится неэффективным при нагрузке свыше примерно 35 кВт (Cisco, 2026). Жидкостное охлаждение «прямо на чип» подходит для стандартных моделей графических процессоров; погружное охлаждение — для экстремальных нагрузок; теплообменники, устанавливаемые на задней панели, заполняют промежуток между ними, обеспечивая возможность постепенного расширения мощности. Принцип планирования вытекает из законов физики: сначала определяется мощность системы охлаждения, а уже потом выбираются серверы, а не наоборот.

PUE и «ловушки» эффективности при проектировании систем электропитания

Показатель эффективности использования энергии (PUE), равный отношению общего энергопотребления объекта к энергопотреблению ИТ-оборудования, является отраслевым критерием оценки эффективности. Средний мировой показатель составляет около 1,58 (Uptime Institute, 2023); новые корпоративные и колокационные объекты уровня Tier III стремятся достичь показателя 1,4, а гипермасштабные операторы демонстрируют показатели в диапазоне от 1,08 до 1,12 (Инженеры GBC, 2025). Однако показатель PUE таит в себе три «ловушки». Во-первых, «ловушка расчетного дня»: показатель PUE, рассчитанный для идеального дня, не соответствует показателю PUE за весь год. Во-вторых, «ловушка нагрузки»: кривые эффективности смещаются в зависимости от степени загрузки, и объект, работающий на половину мощности, демонстрирует результаты, значительно отличающиеся от расчетных данных. В-третьих, «ловушка воды»: объект мощностью 2 МВт с водяным охлаждением может потреблять 50 000–60 000 галлонов подпиточной воды в день, а эти эксплуатационные расходы никогда не отражаются в показателе PUE. PUE — это эксплуатационный показатель, которым нужно управлять, а не проектная цель, которой нужно хвастаться.

Что означает проектирование систем электроснабжения центров обработки данных для тех, кто их строит и поставляет

Каждое решение, рассмотренное в данной статье — выбор уровня, химический состав ИБУ, расположение каждого SPD, предельная температура охлаждения, которую достигнут стойки, — фиксируется в двух документах: техническом задании и перечне закупок. Именно на этом этапе обсуждение проектных вопросов переходит в плоскость коммерческих переговоров.

Начнем со стороны оператора. Специалисты, управляющие центрами обработки данных, зачастую неправильно понимают, что такое защита: на форумах повсеместно распространено мнение, что недорогой устройство защиты от перенапряжений (SPD) — это “по сути встроенная защита”, а две удлинительные розетки означают двойную защиту. Ни то, ни другое не соответствует действительности, а «слепые зоны» гораздо глубже. Большинство покупателей так и не узнают, что заземление и эквипотенциальное соединение являются необходимыми условиями для работы любого устройства защиты от перенапряжений (SPD). Они также упускают из виду, что разъединитель внутри устройства является настоящим барьером качества, ведь именно его отказ приводит к тому, что устройство защиты становится причиной пожара. Типичная картина: покупатели оценивают защиту по цене устройства, тогда как реальный риск заключается в стоимости простоя. Один-единственный случай незапланированного простоя может обойтись дороже, чем весь бюджет объекта на защиту. Для операторов это означает, что при выборе защиты следует ориентироваться на стоимость защиты от риска простоев, а не на самое низкое предложение по цене устройства. Для поставщиков это означает, что победа в тендере решается еще на этапе разработки технических требований. Тот, кто разъяснит инженеру-проектировщику три условия — многоуровневая защита, отключение и соединение — попадет в короткий список кандидатов еще до начала тендера.

Теперь рассмотрим сторону поставщика. Работа по энергоснабжению центров обработки данных носит проектный характер: от средних партий до крупных объемов, с подробной спецификацией по каждому элементу, где ключевыми условиями являются утверждение чертежей и соответствие техническим требованиям. Подрядчик или инженер-проектировщик несет расходы, связанные с отказом, если устройство работает не в соответствии с сертификационными характеристиками. Именно такая структура определяет, что имеет значение с коммерческой точки зрения. Сертификация — это пропуск: устройства должны быть протестированы и сертифицированы в соответствии с IEC/EN 61643-11 признанными органами, поскольку ни один инженер по техническим характеристикам не включит в проект несертифицированный компонент. Стабильность поставок имеет большее значение, чем ценовая эластичность, поскольку задержка партии приводит к задержке графика ввода в эксплуатацию. Условия гарантии указывают на то, кто несет риск: отраслевой стандарт составляет 2 года, а предложения с 5-летней гарантией меняют расчет ответственности. А субсертификация, при которой производитель предоставляет доступ к своей сертифицированной платформе партнерам-OEM, сокращает путь интегратора к рынку.

Производители, соответствующие этому профилю, — это те, чьи инженеры-проектировщики фактически включают SPD в технические требования к центрам обработки данных. Например, компания LSP имеет сертификаты TÜV и CB для всех своих линеек устройств Тип 1, Тип 1+2 и Тип 2 (классы, предусмотренные многоуровневой моделью, описанной в данной статье), прошедших испытания в соответствии со стандартом IEC/EN 61643-11, и предлагает услуга по выдаче субсертификатов для партнёров-производителей оригинального оборудования (OEM) созданные на основе этой сертифицированной платформы. Для покупателей, находящихся на этапе определения технических требований, и интеграторов, занимающихся внедрением средств защиты в проекты центров обработки данных, ориентиром служит полный спектр сертификатов, доступный в виде Устройства защиты от перенапряжений, сертифицированные по стандартам TÜV и CB, а не на каком-либо отдельном утверждении из технического паспорта.

Ссылки

1. Uptime Institute. “Система классификации уровней”.” https://uptimeinstitute.com/tiers
2. МЭК. “МЭК 61643-11:2025. Низковольтные устройства защиты от перенапряжений”.” https://webstore.iec.ch/en/publication/65314
3. Инженеры компании GBC. “Основы проектирования электрических систем центров обработки данных”. 2025 г. https://gbc-engineers.com/news/electrical-data-center-design
4. Инженеры компании GBC. “Что такое проектирование системы электроснабжения центра обработки данных?” 2025. https://gbc-engineers.com/news/data-center-power-design
5. Cisco. “Контрольный список по проектированию и созданию центров обработки данных на базе искусственного интеллекта”. 2026. https://blogs.cisco.com/insidervoices/ai-data-center-design-checklist
6. phoenixNAP. “Обзор проектирования систем электроснабжения центров обработки данных”. 2025 г. https://phoenixnap.com/blog/data-center-power
7. Texas Instruments (LinkedIn). “Как напряжение 800 В постоянного тока произведёт революцию в сфере центров обработки данных”. 2025 г. https://www.linkedin.com/posts/texas-instruments_20000-amps-of-current-in-one-server-rack-activity-7335394893118222336-59Wg
8. LSP. “Сертификаты”.” https://lsp.global/certificates/
9. LSP. “Партнерство с производителями оригинального оборудования”.” https://lsp.global/oem-partnerships/
10. LSP. Главная страница. https://lsp.global/