China Telecom sviluppa modelli AI MoE esclusivamente su chip Huawei

China Telecom ha sviluppato i primi modelli di intelligenza artificiale del paese con l'innovativa architettura Mixture-of-Experts (MoE), addestrati interamente su chip avanzati di Huawei Technologies.

Secondo un documento tecnico pubblicato lo scorso mese dall'Istituto di Intelligenza Artificiale di China Telecom (TeleAI), i modelli TeleChat3, con parametri da 105 miliardi a trilioni, sono stati addestrati sui chip Ascend 910B di Huawei e sul suo framework open-source per l'apprendimento profondo, MindSpore.

I ricercatori di TeleAI hanno dichiarato che lo stack Huawei ha soddisfatto le "esigenze severe" dell'addestramento di modelli MoE su larga scala in una gamma di dimensioni. "Questi contributi collettivamente affrontano colli di bottiglia critici nell'addestramento di modelli all'avanguardia, stabilendo una soluzione completa matura su misura per gli ecosistemi computazionali nazionali", essi ha. 

Il modello di China Telecom è in ritardo rispetto a GPT-OSS-120B di OpenAI

L'architettura MoE distribuisce i compiti tra più sottomoduli specializzati, o "esperti". Di conseguenza, i modelli AI sviluppati con tale architettura possono scalare la capacità senza aumenti significativi dell'overhead computazionale. Il MoE è stato reso popolare dal modello V3 di DeepSeek, rilasciato nel dicembre 2024, e da allora è diventato lo standard per i modelli AI cinesi all'avanguardia.

Tuttavia, i modelli MoE sono stati considerati più complessi da addestrare ed eseguire. I punteggi di performance auto-dichiarati da China Telecom per i suoi modelli TeleChat3 hanno mostrato che erano in ritardo rispetto a quelli di GPT-OSS-120B di OpenAI, rilasciato ad agosto, su diversi benchmark.

La scorsa settimana, una spin-off dell'Università di Tsinghua ha annunciato che il suo nuovo modello di generazione di immagini è stato addestrato su chip Huawei, diventando il primo modello open-source sviluppato interamente su uno stack di addestramento domestico a raggiungere punteggi leader del settore nella generazione di immagini.

Zhipu AI, con sede a Pechino, è stata inserita in una lista nera da Washington lo scorso gennaio. Gli Stati Uniti hanno inserito diverse aziende tecnologiche cinesi, tra cui Huawei e iFlytek, in liste nere per il controllo delle esportazioni. Ciò le priva efficacemente della possibilità di ricevere chip di origine statunitense, strumenti semiconduttori e altre tecnologie avanzate.

I ricercatori di Ant Group, un'affiliate fintech di Alibaba Group Holding, hanno anche dichiarato di aver addestrato con successo un modello MoE da 300 miliardi di parametri "senza GPU premium". Tuttavia, non hanno specificato se avessero utilizzato esclusivamente chip progettati a livello nazionale.

Nel frattempo, mentre ha riportato da Cryptopolitan, un indice azionario locale cinese simile al Nasdaq è salito di quasi il 13% solo questo mese. Un secondo indicatore che monitora le aziende tecnologiche cinesi quotate a Hong Kong è in rialzo del 6%, e entrambi stanno lasciando indietro il Nasdaq 100.

Le azioni Nvidia crollano mentre Pechina dichiara l'autosufficienza

Nvidia ha affermato che le sue GPU avanzate e i framework di machine learning sono gli strumenti migliori al mondo per l'addestramento di modelli MoE su larga scala. Tuttavia, Pechino ha reso l'autosufficienza in tutto lo stack AI una priorità chiave per il paese nei prossimi cinque anni a causa delle restrizioni commerciali statunitensi che impediscono alle imprese cinesi l'accesso ai chip statunitensi avanzati.

Il governo statunitense ha recentemente dato il via libera alla vendita della H200, il secondo chip più potente dell'azienda, alla Cina. Tuttavia, la Cina ha bloccato le spedizioni di chip avanzati. Cryptopolitan ha riportato Pechino potrebbe prendere in considerazione restrizioni per promuovere lo sviluppo locale di chip o rafforzare la propria posizione negoziale con gli Stati Uniti.

Di conseguenza, i fornitori hanno interrotto la produzione dei componenti H200 dopo il blocco. Nvidia si aspettava oltre 1 milione di ordini da clienti cinesi, con i fornitori pronti per le consegne di marzo, ma secondo quanto riportato gli ufficiali doganali avrebbero rifiutato l'ingresso dei chip.

Da allora, le azioni Nvidia sono scese di circa il 3% dopo le notizie. Secondo gli analisti, Nvidia affronta un rischio chiaro: se la Cina continuerà a bloccare le spedizioni di H200, il titolo potrebbe rompere un importante supporto a breve termine. Se le approvazioni dovessero allentarsi, il rimbalzo potrebbe essere rapido, ma l'incertezza normativa ha effetti ambivalenti. 

Dall'altro lato, altri produttori di chip hanno mostrato andamenti misti: AMD è salita dell'1,7%, Intel è scesa del 2,8%, mentre l'ETF S&P 500 SPY ha registrato un calo di circa lo 0,1%. Nel frattempo, gli osservatori di mercato attendono i risultati trimestrali di NVDA previsti per il 25 febbraio e eventuali nuovi dettagli sulla situazione delle esportazioni verso la Cina.