Как уязвимость центров обработки данных угрожает финансовым сетям по всему миру

Когда сбой в системе охлаждения в центре обработки данных в Авроре, штат Иллинойс, привел к остановке торговли фьючерсами и опционами на Чикагской товарной бирже, этот сбой продемонстрировал, как одна техническая неисправность может одновременно повлиять на мировые рынки.

Сбой начался 27 ноября на объекте, которым управляет CyrusOne, где вышло из строя охлаждающее оборудование, в результате чего температура поднялась настолько, что пришлось отключить серверы, обрабатывающиеtrac, связанные с акциями, иностранной валютой, облигациями и сырьевыми товарами.

По данным Bloomberg, остановка длилась несколько часов и заморозила деятельность, связанную с триллионами долларов. Это показало, как рынки, работающие без перерывов, могут быть выведены из строя из-за перегрева оборудования в одном здании.

Объект, на котором работает платформа CME, является частью кампуса, который KKR & Co. и Global Infrastructure Partners приобрели в 2022 году. CyrusOne сообщила, что «сбой в работе холодильной установки» затронул сразу несколько охлаждающих устройств, что привело к отключению серверов в целях безопасности.

После начала отключения компания CyrusOne установила временное холодильное оборудование для стабилизации температуры, пока её сотрудники работали над восстановлением работы основных систем. Компания сообщает, что на её площадке в Авроре используются чиллеры с воздушным охлаждением и холодный наружный воздух, когда температура опускается ниже -3°F, а в то утро, согласно метеорологическим журналам, в этом районе было -8°F.

CyrusOne заявляет на своем веб-сайте, что на объекте установлены дополнительные охлаждающие устройства, предназначенные для защиты от подобных сбоев, но неясно, сработало ли хоть одно из этих резервных устройств во время этогоdent.

Сбои в работе систем охлаждения приводят к сбоям в работе всей криптоинфраструктуры

Закрытие CME произошло в тот момент, когда центры обработки данных становятся все более важными для рынков, криптовалютных бирж, разработчиков искусственного интеллекта и поставщиков облачных услуг.

В этих зданиях расположены ряды серверов, оснащенных чипами, которые хранят и обрабатывают огромные объемы информации. Их вычислительная мощность позволяет обрабатывать всё: от рыночных потоков до аналитики блокчейнов и облачных кошельков.

Эти серверы потребляют так много электроэнергии, что центр обработки данных может сжигать в 50 раз больше энергии на квадратный фут, чем офисное здание, и большая часть этой энергии превращается в отходящее тепло, которое необходимо отводить во избежание сбоев.

Операторы стараются разместить как можно больше серверов в каждой комнате, чтобы иметь возможность сдавать в аренду клиентам больше вычислительных мощностей, но это также приводит к выделению большего количества тепла.

Охлаждение этих объектов стало составлять значительную часть общей стоимости. В некоторых проектах только на охлаждение тратится до 15% бюджета. Старые объекты полагались на холодный воздух. Вентиляторы прогоняли охлаждённый воздух по стойкам, а тёплый отработанный воздух выводился наружу.

Но когда нагрузки на ИИ выросли примерно в 2022 году, компании начали переходить на жидкостное охлаждение. Холодная жидкость протекает через пластины под чипами или заполняет резервуары, в которые погружены серверы. В некоторых системах используются специальные жидкости с низкой температурой кипения, которые испаряются при соприкосновении с горячими чипами, а затем конденсируются обратно в жидкость.

Жидкость может поглощать больше тепла, чем воздух, но это повышает риск. Утечка может повредить дорогостоящее оборудование и вывести системы из строя.

После сбора тепла жидкость или воздух переносят его в контур охлажденной воды, который подает его в градирню или промышленный охладитель. Эти градирни также потребляют большое количество воды, поскольку часть ее испаряется в процессе охлаждения. Многие сообщества выражают обеспокоенность по поводу чрезмерного потребления воды, особенно в регионах, уже испытывающих ее дефицит.

Перегрев приводит к закрытию платформ и остановке торговых систем

Перегрев центра обработки данных может привести к повреждению чипов, потере данных и сбоям в работе сервисов. В ноябре из-за сбоев в работе Cloudflare были выведены из строя такие сайты, как X и ChatGPT.

Отдельные неполадки в Amazon Web Services, Microsoft и CrowdStrike приводили к отключению части интернета на несколько часов подряд. Эти события показывают, насколько повседневная жизнь зависит от нескольких компаний, обеспечивающих бесперебойную работу инфраструктуры.

Операторы обеспечивают резервирование с помощью резервных генераторов, дополнительных систем охлаждения и даже полностью дублирующих кампусов. Но отключение CME показывает, что даже эти уровни могут выйти из строя при одновременной поломке нескольких компонентов.

Один неисправный охладитель надолго вывел из строя крупного оператора рынка, что повлияло наtracпо всему миру, и даже при наличии на объекте дополнительного холодильного оборудования до сих пор неизвестно, помогло ли вообще какое-либо резервирование.