Каждые 60 секунд частота в энергосетях Европы, США, Австралии и Малайзии едва заметно проседала — причём одновременно. Синхронные сбои энергосетей, которые годами выглядели как загадочная неисправность инфраструктуры, исследователи из немецкого Forschungszentrum Jülich связали с массовой проверкой уровня заряда батарей в ИБП и системах накопления энергии, сообщает TechCrunch. Для дата-центров и разработчиков устройств это неприятное напоминание: безобидная задача по расписанию способна стать сетевой проблемой, если её одновременно выполняют миллионы устройств.
На стабильность электросети влияет её частота. В системах с номиналом 50 Гц диспетчеры стараются удерживать колебания в узком диапазоне: серьёзные отклонения могут привести к неверным действиям автоматики, повреждению оборудования и, в худшем сценарии, отключениям. Короткие провалы сами по себе не редкость, но здесь настораживала регулярность: сигнал появлялся ровно раз в минуту и наблюдался на сетях, не связанных друг с другом.
Разобраться с аномалией попыталась группа под руководством Дирка Витхаута из Forschungszentrum Jülich. Задачу учёным передал немецкий оператор магистральной сети Tennet Germany. Первой подозреваемой стала гидроэнергетика: турбины могут создавать ультранизкочастотные колебания, а резонанс способен усиливать вибрации. Модель системы управления гидростанцией в скандинавской сети действительно позволила получить эффект с пиком раз в минуту. Но она не объясняла главное: механический резонанс обычно затухает или меняется, а этот паттерн сохранялся минутами и часами.
Когда у электроники общий будильник
Команда предположила, что у источника должен быть общий таймер. На кампусе Jülich установили более 80 интеллектуальных измерителей качества электроэнергии. Они снимали показатели частоты, напряжения, тока и мощности раз в три секунды на участках со средне- и низковольтными линиями, трансформаторами, солнечными панелями, аккумуляторными системами и ИБП для вычислительной инфраструктуры.
Измерения вывели на трансформатор, подключённый к аккумуляторному хранилищу: нагрузка на нём достигала пика раз в минуту — в тот же момент, что и просадка частоты в больших сетях. Оказалось, многие стационарные батареи, от ИБП в дата-центрах до промышленных накопителей, каждые 60 секунд оценивают состояние заряда. Их часы синхронизированы через сеть с высокой точностью. Один такой запрос для энергосистемы незаметен; миллионы запросов, совпавшие во времени, уже складываются в измеримый импульс.
Косвенное подтверждение исследователи нашли в Ирландии, где дата-центры стали крупными потребителями электричества. В 2022 году на них приходилось 18% нагрузки национальной энергосети. Между 2016 и 2021 годами минутная просадка частоты там выросла с 3 до 12 миллигерц, то есть в четыре раза; в последние годы отдельные падения превышали 20 миллигерц. Для ирландской сети с частотой 50 Гц это всё ещё далеко от пределов устойчивости: она рассчитана на колебания в пределах плюс-минус 200 миллигерц, а оператор предпочитает удерживать их до 100 миллигерц. Однако ИБП — лишь один тип нагрузки, и в сочетании с другими возмущениями даже небольшой дополнительный импульс становится лишним фактором риска.
Практический рецепт у проблемы почти обидно простой: производителям ИБП и аккумуляторных систем предлагают добавить случайную задержку при проверке заряда. Тогда устройства будут выполнять одну и ту же операцию в разные моменты, а не строем по сигналу системных часов. Такой подход давно знаком разработчикам распределённых систем: джиттер в расписании помогает избежать эффекта «стада», когда множество клиентов одновременно бьют по одному сервису. Теперь тот же приём пригодился физической инфраструктуре.
Авторы проверили и обычные подключённые устройства. Периодические изменения потребления удалось увидеть у умной духовки и кластеров Raspberry Pi. Исправление также сводится к обновлению прошивки, но именно тут начинается менее элегантная часть истории: по данным упомянутого исследования, актуальную версию firmware используют менее 3% IoT-устройств. Для команд, проектирующих электронику, это повод смотреть на таймеры, телеметрию и фоновые задачи не только как на локальную оптимизацию устройства.
Синхронные сбои энергосетей теперь получили правдоподобное объяснение, но не автоматическое решение. Регуляторы могут потребовать изменений от производителей в своей юрисдикции, однако батареи, дата-центры и IoT-устройства работают по всему миру. Чем больше в сети подключённой техники с одинаковыми настройками по умолчанию, тем важнее становится глобальное правило: не заставлять инфраструктуру делать одно и то же в одну и ту же секунду.