Масштабный сбой в работе сети, который парализовал торги на бирже CME Group более чем на 10 часов, был tracчеловеческой ошибкой в центре обработки данных, которым управляет CyrusOne, что подчеркнуло уязвимость глобальной финансовой инфраструктуры.
причиной стала ошибка техника, допущенная при проведении ремонтных работ в городе Аврора, штат Иллинойс. Авария ,, произошедшая 28 ноября, парализовала работу некоторых из важнейших мировых финансовых рынков и выявила уязвимость инфраструктуры, поддерживающей торговлю производными финансовыми инструментами по всему миру.
CyrusOne заявила, чтоdent произошел из-за несоблюдения сотрудниками иtracна объекте «стандартных процедур осушения градирен», которые охлаждают внутреннюю инфраструктуру до наступления холода. По мере снижения температуры на улице снизилась и температура внутри объекта, когда система охлаждения перестала работать. Это привело к отказу нескольких ключевых охлаждающих устройств, что привело к повышению температуры в серверных.
Серверы, на которых размещалась торговая платформа Globex биржи CME, начали перегреваться. Роботизированные системы безопасности отключили оборудование, чтобы избежать повреждений. Из-за отключения основных серверов рынки фьючерсов, опционов и продуктов CME, привязанных к товарам, валютам и казначейским облигациям, внезапно прекратили обработку сделок.
Пауза отразилась на всей мировой финансовой системе. Трейдеры в Азии, Европе и США были отрезаны от текущих цен или не могли управлять своими позициями. На некоторых крупнейших рынках ликвидность полностью исчезла, например, на фьючерсах на золото и казначейские облигации, оставив некоторых трейдеров без защиты в ожидании возобновления работы систем.
Рынки содрогаются, поскольку последствия закрытия экономики ощущаются по всему миру
Сбой произошёл рано утром в США, что побудило трейдеров оценить ситуацию. К тому времени, как цены на продукты, торгуемые на CME, уже открылись для многих трейдеров в Европе и Азии. Фьючерсы на ведущие американские фондовые индексы перестали обновляться. На товарных рынках, включая нефть и золото, царила зловещая тишина. Фьючерсы на казначейские облигации США, основополагающий инструмент мировой торговли инструментами с фиксированной доходностью, были отключены в течение нескольких часов.
Валютные рынки также были в смятении из-за отключенияtronброкерской системы CME для валютной торговли Globex. Трейдеры не смогли избежать рисков или зафиксировать прибыль. Институциональные отделы столкнулись с аналогичными проблемами, некоторые из которых заявили, что их стандартные инструменты управления рисками стали неэффективными.
Сбой показал, насколько современные рынкиdent от небольшого числа центров обработки данных. Из-за отключения основного движка CME практически ни один сегмент мировой торговли не имел доступа к одному из важнейших каналов ценовых данных. Некоторые компании сообщили о незначительных внутренних задержках, связанных с ростом активности на альтернативных платформах, в то время как другие предупреждали, что невозможность закрыть позиции представляет серьёзную опасность. Они утверждали, что если бы акции резко упали во время остановки торгов, убытки могли бы быть катастрофическими.
Длительная задержка CME с возобновлением торгов в Черную пятницу была вызвана отключением площадки для стабилизации работы систем охлаждения и возобновления работы серверов.
CME пересматривает стратегию центров обработки данных после человеческой ошибки
После того, как было установлено, что основной причиной сложившейся ситуации был человеческий фактор, компания CyrusOne заявила, что уже внедрила более строгие процедуры, связанные с холодным климатом. Они включают в себя увеличение численности дежурного персонала в периоды экстремальных погодных условий, улучшение инфраструктуры охлаждения, повышение устойчивости систем и улучшение резервных систем для предотвращения одновременного выхода из строя нескольких блоков.
Этотdent вновь разжег дебаты по поводу решения CME зависеть от центра обработки данных, который ей больше не принадлежит. CME продала площадку Aurora в 2016 году. С тех пор она полагалась на CyrusOne для управления инфраструктурой, поддерживающей большую часть ее торговtron.Сбой также вызвал вопросы о том, обеспечивает ли такая схема достаточный контроль CME над своими основными системами.
Возникли вопросы по поводу решения CME не переезжать на резервный объект. Планы действий в чрезвычайных ситуациях предусматривали перенос работ на второй объект, но CME отказалась от его запуска, поскольку получила предварительные данные о том, что отключение будет кратковременным. Однако несколько часов потери охлаждения оказались гораздо более серьёзными, и задержка привела к тому, что отключение продлилось более десяти часов.
Отраслевые аналитики утверждают, что этот эпизод должен послужить сигналом тревоги. Современные рынки — это не только программное обеспечение, но и аппаратное обеспечение с системами энергоснабжения и охлаждения. Сбой в любой из них может остановить мировые рынки.
