마이크로소프트의 MAI-1이 GPT4 및 기타 LLM 모델과 경쟁

마이크로소프트는 OpenAI, Google, Anthropic과 경쟁하는 새로운 대규모 언어 모델인 MAI-1을 개발 중입니다. 더 인포메이션(The Information)의 보고서에 따르면, 이 프로젝트는 마이크로소프트의 AI CEO인 무스타파 술레이만(Mustafa Suleyman)이 총괄합니다. 새로운 LLM 모델의 목적은 아직 명확하지 않지만, 마이크로소프트가 이전에 출시한 오픈 소스 LLM 모델보다 클 것입니다.

MAI-1, GPT4, 아니면 Grok?

MAI-1은 이 규모를 가진 마이크로소프트 최초의 자체 개발 LLM입니다. 파라미터가 5,000억 개에 달하여 마이크로소프트가 개발한 언어 모델 중 가장 큰 모델 중 하나입니다. MAI-1은 최근 출시된 Phi-3 mini를 포함한 기술 거인이 개발한 모든 오픈 소스 모델을 능가합니다.

GPT4는 실행 속도에 따라 1.74조 개의 파라미터를 가지고 있는 것으로 추정됩니다. 일론 머스크의 Grok-1은 3,140억 개의 파라미터를 가지고 있으며 가장 큰 오픈 소스 LLM으로 간주됩니다. DeepMind와 Claude 3은 AI 모델 파라미터 수를 공개하지 않았습니다. 

왜 MAI-1을 구축하나요?

마이크로소프트가 OpenAI에 100억 달러를 투자하는 동안 새로운 LLM 모델을 개발하는 이유는 명확하지 않습니다. 더 인포메이션(The Information)에 따르면, MAI-1의 목적은 그 성능에 달려 있습니다. 이 기술 거인은 다양한 데이터 소스를 사용하여 모델을 훈련하고 Nvidia GPU를 사용하여 서버 클러스터를 구축할 것입니다.

마이크로소프트의 CTO인 케빈 스콧은 LinkedIn에서 이것이 뉴스가 되는 이유를 확신하지 못했지만, MAI-1의 개발을 확인했습니다. 

출처: LinkedIn

마이크로소프트는 AI 경쟁에서 선두를 달리고 있으며 Copilot과 Dynamics 365 AI를 포함한 제품 전반에 OpenAI 기술을 통합했습니다. 더 인포메이션(The Information)은 마이크로소프트가 올해 말 Build 개발자 컨퍼런스에서 MAI-1을 조기에 시연할 수 있다고 보도했습니다. 모델 시연은 다가오는 주 동안의 진전에 달려 있습니다.

마이크로소프트, AI에 올인

마이크로소프트는 인공지능과 대규모 언어 모델에 깊이 관여하고 있습니다. 지난달, 마이크로소프트는 Phi-3 mini라는 경량 AI 모델을 출시했습니다. 마이크로소프트의 GenAI 연구 부사장인 세바스티안 뷔벡(Sebastien Bubeck)에 따르면, Phi-3 mini는 현저히 저렴하며 유사한 기능을 가진 다른 모델보다 비용 효율성이 10배 더 높습니다.  

오늘 마이크로위스콘신주에 새로운 AI 데이터 센터를 발표했습니다. 조 바이든 대통령이 이 기술 거인과 함께 발표에 참여했습니다. 마이크로소프트는 AI 분야에서 파트너십을 지속적으로 확대하고 있습니다. 두 달 전, 마이크로소프트는 프랑스 회사 Mistral AI와 파트너십을 맺었습니다. 또한 생성형 AI를 통신 회사에 통합하기 위해 보다폰(Vodafone)과 10년 간의 파트너십을 맺었습니다.