Дата-центры в Вирджинии отключились от сети: энергосистема США потеряла 3 ГВт нагрузки

Утром 22 июля в Северной Вирджинии вышла из строя региональная линия электропередачи. Почти сразу местные дата-центры отсоединились от внешней сети и перевели серверы на резервное питание.

Для самих площадок защита сработала именно так, как и должна была. Для энергетиков всё выглядело гораздо тревожнее: из системы PJM Interconnection внезапно исчезло более 3 ГВт спроса, около 3% всей нагрузки крупнейшей региональной энергосети США в тот момент.

Массового блэкаута не произошло. PJM сообщила, что надёжность системы не пострадала, а Dominion Energy вернула её в нормальный режим за несколько минут. Тем не менее колебания напряжения зафиксировали на огромной территории — от района Вашингтона до Чикаго.

История важна не потому, что в США едва не погас свет. Она показала куда более неприятную вещь: крупные дата-центры могут расшатать энергосеть не только огромным аппетитом, но и внезапным отказом от электричества.

Что произошло с дата-центрами в Северной Вирджинии

Северная Вирджиния давно получила неофициальное название Data Center Alley. Здесь сосредоточен крупнейший в мире кластер серверных площадок, обслуживающих облачные сервисы, интернет-платформы и растущую инфраструктуру искусственного интеллекта.

Когда утром 22 июля одна из линий электропередачи вышла из строя, качество питания ухудшилось. Встроенная автоматика дата-центров не стала проверять, насколько серьёзна авария и как быстро энергетики её устранят. Она просто сделала то, ради чего была установлена: отделила дорогостоящее оборудование от нестабильной сети.

В зависимости от конструкции площадки нагрузку в такой момент принимают аккумуляторные системы, источники бесперебойного питания или резервные генераторы. Серверы продолжают работать, пользователи могут вообще ничего не заметить.

Но в Северной Вирджинии речь шла не об одном здании.

Множество объектов увидели одно и то же отклонение и почти синхронно решили, что внешней сети больше нельзя доверять. За считаные мгновения PJM потеряла более 3 ГВт потребления — объём, который невозможно списать на обычное колебание спроса.

Почему исчезновение 3 ГВт оказалось проблемой для энергосистемы США

Электричество нельзя заранее сложить на огромный склад и доставать оттуда по мере необходимости. В энергосистеме производство и потребление должны совпадать практически каждую секунду.

Пока дома, заводы и дата-центры забирают определённый объём энергии, электростанции вырабатывают сопоставимую мощность. Если несколько крупных потребителей внезапно отключаются, генерация не успевает уменьшиться с той же скоростью.

В сети на короткое время появляется избыток энергии. Из-за него растут частота и напряжение, а автоматика начинает срочно возвращать систему к балансу.

Именно это произошло после отключения дата-центров в Вирджинии.

Обычно энергетики опасаются противоположного сценария — аварийной остановки электростанции, после которой электричества становится слишком мало. Здесь же производство осталось на месте, а потребление размером с несколько крупных промышленных районов внезапно исчезло.

PJM зарегистрировала резкое падение спроса и изменение частоты. Система удержалась, но событие оказалось достаточно крупным, чтобы его последствия заметили далеко за пределами места аварии.

Свет не погас, но скачок дошёл до Чикаго

Компания Ting Labs располагает сетью из 1,4 млн датчиков, следящих за качеством электричества в домах. По словам её главы Боба Маршалла, приборы зарегистрировали колебания напряжения вдоль восточной части США и вплоть до Чикаго.

Некоторые клиенты в Северной Вирджинии сообщали о мигающем свете, а также необычных звуках от холодильников и кондиционеров.

Маршалл оценил полную стабилизацию примерно в десять минут. Это не официальная оценка PJM, а вывод компании по данным собственных датчиков.

Dominion Energy заявила, что её диспетчеры справились с ситуацией в течение нескольких минут. PJM, в свою очередь, подчеркнула, что происшествие не повлияло на общую надёжность энергосистемы, обслуживающей около 67 млн человек.

Поэтому называть случившееся блэкаутом неправильно. Электроснабжение не рухнуло, десятки миллионов людей не остались без света.

Но и обычным техническим сбоем его назвать трудно. Одна повреждённая линия заставила целый кластер дата-центров одновременно изменить режим работы, а последствия этого решения растянулись на сотни километров.

Почему дата-центры так чувствительны к перепадам напряжения

Владелец серверной площадки смотрит на ситуацию иначе, чем оператор энергосети.

Для PJM краткий провал напряжения может быть нарушением, которое автоматика исправит почти мгновенно. Для дата-центра даже несколько неудачных секунд несут риск остановки вычислений, сбоя охлаждения или повреждения оборудования стоимостью в миллиарды долларов.

Поэтому защита настроена осторожно. Иногда ей проще немедленно перевести площадку на автономное питание, чем надеяться, что внешняя сеть быстро придёт в норму.

Логика понятна: лучше запустить резервную систему без необходимости, чем потерять серверы или отключить сервисы, которыми пользуются миллионы людей.

До недавнего времени энергетики могли рассматривать такое поведение как частное решение отдельного клиента. Теперь это уже не частный вопрос. Когда на небольшой территории собраны десятки крупных дата-центров, одинаковая осторожность превращает их в огромный синхронный блок.

Каждый объект защищает себя. Все вместе они создают новую угрозу для системы, от которой только что отключились.

Похожий сбой уже произошёл в 2024 году

Случай 22 июля не стал первым предупреждением.

В июле 2024 года повреждение линии в восточной части США вызвало несколько провалов напряжения. Защитные системы дата-центров начали переводить оборудование на резервное питание, и энергосистема лишилась примерно 1,5 ГВт нагрузки.

Расследование NERC показало, что весь потерянный объём относился к дата-центрам. Частота и напряжение выросли, а диспетчерам пришлось вручную возвращать параметры к нормальному уровню.

Тогда серьёзной аварии тоже удалось избежать. Но регулятор обратил внимание на опасный пробел: американские энергосистемы десятилетиями рассчитывали последствия остановки крупных электростанций, а к одновременному исчезновению гигантского массива потребителей оказались готовы хуже.

Событие 2026 года оказалось примерно вдвое крупнее по объёму пропавшего спроса.

Два похожих эпизода в одном регионе уже трудно считать случайностью. Сценарий повторяется: повреждается линия, напряжение отклоняется от нормы, дата-центры дружно уходят на резерв, а энергетики получают избыток мощности, который нужно немедленно убрать.

Как ИИ-дата-центры меняют энергетику США

Обычно рост искусственного интеллекта обсуждают через нехватку электричества. Технологические компании строят всё более мощные вычислительные комплексы, а энергетики пытаются успеть за спросом на новые электростанции, линии и подстанции.

Инцидент в Северной Вирджинии показал вторую сторону проблемы.

Даже когда электричества хватает, крупные вычислительные площадки ведут себя не как обычные потребители. Они сосредоточены в нескольких регионах, работают круглосуточно и могут мгновенно менять нагрузку, если автоматика замечает неполадку.

Для энергосети это крайне неудобный сосед.

Сегодня дата-центр требует сотни мегаватт и усиливает дефицит мощности. Завтра он за секунды переключается на генераторы, оставляя электростанции с избытком энергии. Затем площадка возвращается, и спрос снова резко растёт.

Чем больше серверных комплексов появляется в Вирджинии и других штатах, тем сильнее становится каждый такой скачок.

ИИ-бум фактически превращает дата-центры из пассивных покупателей электричества в полноценных участников работы энергосистемы. Только правила для них пока не успели измениться с той же скоростью.

Энергетики и технологические компании спорят о настройках защиты

Одно из возможных решений звучит просто: обязать дата-центры пережидать небольшие провалы напряжения, не отключаясь от сети.

В энергетике такую способность называют прохождением через нарушение. Смысл в том, чтобы крупный потребитель не исчезал после первого же скачка и давал системе несколько мгновений на самостоятельное восстановление.

Для PJM и других операторов это снизило бы риск одновременной потери нескольких гигаватт.

Владельцы дата-центров смотрят на предложение без восторга. Чем дольше серверы остаются подключёнными к нестабильному источнику, тем выше риск для электроники, блоков питания и охлаждения.

Технологические компании не хотят проверять устойчивость оборудования ценой возможной аварии. Энергетики, в свою очередь, не могут бесконечно мириться с ситуацией, когда частная автоматика десятков объектов способна встряхнуть сеть целого региона.

У обеих сторон есть весомые аргументы. Поэтому спор, скорее всего, закончится не запретом на резервное питание, а более точными правилами: какие отклонения дата-центр должен выдерживать, когда ему разрешено отключиться и как быстро он может вернуться обратно.

Какие требования могут ввести для дата-центров

После предыдущего инцидента NERC рекомендовала операторам лучше изучать поведение крупных чувствительных потребителей. Энергетикам нужны не только данные об обычном потреблении дата-центра, но и понимание того, что он сделает во время аварии.

Сейчас ключевые вопросы выглядят так:

• при каком падении напряжения площадка отключится;
• сколько мегаватт исчезнет из сети;
• перейдут ли соседние объекты на резерв одновременно;
• как долго дата-центр останется на генераторах;
• вернётся ли вся нагрузка сразу;
• сможет ли оператор заранее управлять этим процессом.

Особенно опасно неконтролируемое возвращение. Если несколько гигаватт сначала исчезнут, а затем так же дружно подключатся обратно, PJM получит уже обратный скачок — резкий рост потребления.

Поэтому будущие правила могут затронуть не только момент отключения, но и скорость возвращения дата-центров в сеть. Нагрузку могут обязать наращивать постепенно, согласовывая этот процесс с диспетчерами.

Также обсуждаются более подробные модели крупных потребителей, передача энергетикам настроек защитных систем и использование батарей, которые смогут сглаживать резкие изменения.

PJM уже меняет правила подключения новых дата-центров

Отдельно от расследования сбоя PJM работает над новой схемой подключения крупных потребителей.

Оператор признаёт, что дата-центры появляются быстрее, чем регион успевает строить электростанции и расширять сети. По одному из рассматриваемых вариантов новые площадки смогут подключаться раньше, но в критические периоды должны будут соглашаться на ограничение потребления.

Другой путь — привести с собой собственный источник энергии: генерацию или крупные батареи.

PJM также рассматривает ускоренное подключение новых электростанций и резервные закупки мощности. Главная задача — не закрыть регион для дата-центров, а не допустить ситуации, при которой их рост начнёт угрожать остальным потребителям.

Событие 22 июля добавляет к этому плану новый вопрос. Мало обеспечить дата-центр электричеством. Нужно заранее понимать, что произойдёт с системой, когда он внезапно перестанет это электричество брать.

Кто заплатит за усиление электросети

За техническими формулировками скрывается большой денежный конфликт.

Для обслуживания дата-центров нужны новые линии, подстанции, электростанции и накопители. Теперь может понадобиться дополнительная автоматика, которая поможет сети переживать резкие отключения и возвращение крупных нагрузок.

Строительство оплачивает не абстрактная энергосистема. В конечном счёте деньги приходят либо от владельцев дата-центров, либо от остальных потребителей через тарифы.

Жители не хотят оплачивать инфраструктуру, построенную ради серверов Amazon, Microsoft, Google и других технологических гигантов. Компании отвечают, что их площадки создают рабочие места, приносят налоги и покупают огромные объёмы энергии.

Пока спор в основном вращался вокруг роста счетов и нехватки мощности. Теперь к нему добавляется безопасность: кто должен платить за защиту сети от внезапных действий самих дата-центров?

Ответ повлияет не только на жителей Вирджинии. Аналогичные кластеры растут в Техасе, Огайо, Пенсильвании и других штатах, где технологические компании ищут дешёвую землю и доступ к электроэнергии.

Что изменится после сбоя в Северной Вирджинии

Непосредственной катастрофы 22 июля не случилось, поэтому ждать немедленного запрета на новые дата-центры не стоит.

Скорее всего, PJM, Dominion Energy и регуляторы подробно восстановят ход событий: какие объекты отключились, при каких параметрах сработала защита, сколько времени они провели на резервном питании и как возвращались в общую сеть.

Именно эти детали покажут, был ли инцидент следствием неудачного совпадения или закономерным результатом одинаковых настроек оборудования.

Однако главный вывод уже трудно оспаривать.

Дата-центры в Северной Вирджинии больше нельзя считать обычными зданиями, которые просто покупают много электричества. Суммарно они стали настолько крупными, что их автоматическое решение уйти на резерв способно изменить работу энергосистемы, обслуживающей десятки миллионов человек.

В этот раз PJM удержала баланс, свет массово не погас, а отклонения удалось погасить за несколько минут.

Но объём внезапно исчезнувшей нагрузки уже вырос с 1,5 ГВт в 2024 году до более чем 3 ГВт. На фоне нового строительства следующий подобный эпизод может оказаться ещё крупнее.