MAI-1 de Microsoft rivalise avec GPT-4 et d'autres modèles LLM

Microsoft développe un nouveau modèle de langage de grande taille, baptisé MAI-1, et se positionne en concurrence avec OpenAI, Google et Anthropic. Selon un article de The Information, le projet est supervisé par Mustafa Suleyman, PDG de la division IA de Microsoft. L'objectif de ce nouveau modèle n'est pas encore clairement défini, mais il sera plus vaste que les modèles open source de ce type publiés précédemment par Microsoft. 

MAI-1, GPT4 ou Grok ?

MAI-1 est le premier modèle de langage interne de cette envergure. Il comportera 500 milliards de paramètresrécemment publié Phi-3 mini,. 

Selon certaines rumeurs, GPT-4 posséderait 1 740 milliards de paramètres, compte tenu de sa vitesse d'exécution. Grok-1, développé par Elon Musk, en compte 314 milliards et est considéré comme le plus grand modèle linéaire étendu open source. DeepMind et Claude 3 n'ont pas divulgué le nombre de paramètres de leurs modèles d'IA. 

Pourquoi construire le MAI-1 ?

On ignore pourquoi Microsoft développe un nouveau modèle LLM tout en investissant 10 milliards de dollars dans OpenAI. Selon The Information, l'objectif de MAI-1 dépendra de ses performances. Le géant technologique entraînera le modèle à l'aide de diverses sources de données et utilisera des GPU Nvidia pour construire un cluster de serveurs. 

Kevin Scott, le directeur technique de Microsoft, a déclaré sur LinkedIn qu'il ne savait pas pourquoi cela faisait la une des journaux ; il a toutefois confirmé le développement de MAI-1. 

Source : LinkedIn

Microsoft prend la tête de la course à l'IA et a intégré la technologie d'OpenAI à ses produits, notamment Copilot et Dynamics 365 AI. The Information , Microsoft pourrait présenter un aperçu de MAI-1 dès sa conférence développeurs Build, plus tard cette année. La présentation de ce modèle dépendra des progrès réalisés dans les semaines à venir.  

Microsoft mise tout sur l'IA

Microsoft est fortement impliqué dans l'intelligence artificielle et les grands modèles de langage. Le mois dernier, l'entreprise a lancé un modèle d'IA léger appelé Phi-3 mini. Selon Sébastien Bubeck, vice-dent de la recherche en IA générale chez Microsoft, le Phi-3 mini estmaticmoins cher et dix fois plus rentable que d'autres modèles aux capacités similaires.  

Aujourd'hui, Microsoft a annoncé l'ouverture d'un nouveau centre de données dédié à l'IA dans le Wisconsin. Le présidentdent Biden s'est joint au géant technologique pour cette annonce. Microsoft poursuit le développement de ses partenariats dans le domaine de l'IA. Il y a deux mois, Microsoft a conclu un partenariat avec la société française Mistral AI. L'entreprise collabore également depuis dix ans avec Vodafone pour intégrer l'IA générative à ses activités de télécommunications.