Come la fragilità dei data center minaccia le reti finanziarie in tutto il mondo

Quando un guasto al sistema di raffreddamento all'interno di un data center ad Aurora, Illinois, ha interrotto il trading di futures e opzioni alla Chicago Mercantile Exchange, la disruption ha esposto quanto un singolo guasto tecnico possa colpire i mercati globali contemporaneamente.

L'interruzione è iniziata il 27 novembre all'interno di una struttura gestita da CyrusOne, il cui equipaggiamento di raffreddamento si è guastato, portando le temperature a livelli tali da spegnere i server che gestivano contratti legati a azioni, valute estere, obbligazioni e materie prime.

L'interruzione è durata ore e ha bloccato attività collegate a trilioni di dollari, secondo Bloomberg. Ha mostrato come i mercati che funzionano senza sosta possano comunque essere disattivati dal surriscaldamento delle macchine all'interno di un singolo edificio.

La struttura che supporta la piattaforma CME fa parte di un campus acquistato nel 2022 da KKR & Co. e Global Infrastructure Partners. CyrusOne ha dichiarato che "un guasto all'impianto di refrigerazione" ha colpito diverse unità di raffreddamento contemporaneamente, causando lo spegnimento dei server per motivi di sicurezza.

Una volta iniziata l'interruzione, CyrusOne ha portato in loco attrezzature di raffreddamento temporanee per stabilizzare le temperature mentre il suo personale lavorava per riportare online i sistemi principali. L'azienda afferma che il suo sito di Aurora utilizza refrigeratori ad aria e aria esterna fredda quando le temperature scendono sotto i 30°F, e i registri meteorologici hanno mostrato 28°F nella zona quella mattina.

CyrusOne dichiara sul suo sito web che la struttura include unità di raffreddamento aggiuntive progettate per proteggere da questi guasti, ma non è chiaro se alcuna di queste unità di backup abbia avuto un ruolo durante questo incidente.

I guasti al raffreddamento innescano interruzioni in tutta l'infrastruttura legata alle criptovalute

La chiusura del CME è avvenuta in un momento in cui i data center stanno diventando sempre più importanti per i mercati, gli exchange di criptovalute, gli sviluppatori di IA e i provider di cloud.

Questi edifici contengono file di server pieni di chip che memorizzano ed elaborano enormi quantità di informazioni. La loro potenza di calcolo alimenta tutto, dai feed di mercato all'analisi blockchain ai wallet cloud.

Questi server consumano così tanta elettricità che un data center può bruciare 50 volte più energia per piede quadrato rispetto a un edificio per uffici, e la maggior parte di quella potenza si trasforma in calore di scarto che deve essere rimosso per evitare guasti.

Gli operatori cercano di inserire il maggior numero possibile di server in ogni stanza per poter affittare più potenza di calcolo ai clienti, ma questo crea anche più calore.

Il raffreddamento di questi siti è diventato una parte significativa del costo totale. Alcuni progetti spendono fino al 15% del loro budget solo per il raffreddamento. I siti più vecchi si affidavano all'aria fredda. I ventilatori spingevano l'aria refrigerata attraverso i rack, e l'aria calda di scarico veniva espulsa all'esterno.

Ma una volta che i carichi di lavoro dell'IA sono diventati più pesanti intorno al 2022, le aziende hanno iniziato a passare al raffreddamento a liquido. Un liquido freddo scorre attraverso piastre sotto i chip o riempie serbatoi in cui i server completi sono sommersi. Alcuni sistemi utilizzano liquidi speciali con punti di ebollizione bassi che evaporano quando toccano i chip caldi, per poi condensare nuovamente in fluido.

Il liquido può assorbire più calore dell'aria, ma aggiunge rischi. Una perdita può danneggiare l'hardware costoso e mettere offline i sistemi.

Una volta raccolto il calore, il liquido o l'aria lo trasferisce a un circuito ad acqua refrigerata che lo porta a una torre di raffreddamento o a un chiller industriale. Queste torri utilizzano anche grandi quantità di acqua perché una parte evapora durante il processo di raffreddamento. Molte comunità hanno espresso preoccupazione per il forte consumo di acqua, specialmente nelle regioni già alle prese con la scarsità idrica.

Gli eventi di surriscaldamento fermano le piattaforme e bloccano i sistemi di trading

Quando un data center si surriscalda, i chip possono subire danni, i dati possono andare persi e i servizi possono fallire. Le interruzioni di novembre hanno colpito Cloudflare, mettendo fuori uso siti come X e ChatGPT.

Problemi separati presso Amazon Web Services, Microsoft e CrowdStrike hanno spento parti di internet per ore alla volta. Questi eventi mostrano quanto la vita quotidiana dipenda da poche aziende che gestiscono infrastrutture sempre attive.

Gli operatori prevedono ridondanza con generatori di backup, unità di raffreddamento aggiuntive e persino campus duplicati completi. Ma l'interruzione del CME mostra che anche questi strati possono fallire quando diverse parti si guastano contemporaneamente.

Un singolo chiller malfunzionante ha disattivato un importante operatore di mercato per un tempo sufficiente a influenzare i contratti in tutto il mondo, e anche con attrezzature di raffreddamento aggiuntive in loco, non è ancora chiaro se la ridondanza abbia aiutato in qualche modo.