Microsoft разрабатывает новую ИИ-модель, чтобы конкурировать с Google и OpenAI

Сообщается, что Microsoft разрабатывает новую собственную ИИ-модель, и это первый случай с тех пор, как она инвестировала более $10 млрд в OpenAI, чтобы использовать ИИ-модели стартапа в своих продуктах и оставаться впереди, пока конкуренты догоняют.

MAI-1 – внутренний проект Microsoft

Говорят, что новая модель достаточно велика, чтобы конкурировать с моделями Alphabet (материнской компании Google) и OpenAI.

Новая модель называется MAI-1 внутри Microsoft, и недавно нанятый Мустафа Сулейман руководит проектом, согласно отчету The Information. Он тот же человек, который соосновал DeepMind, которая позже была куплена Google, и совсем недавно он был генеральным директором другого стартапа под названием Inflection.

Но в отчете утверждается, что это не ИИ-модель Inflection, но компания может использовать обучающие наборы данных и другие связанные технологии от стартапа для этой модели Microsoft, которая полностью отделена от тех, которые Inflection уже выпустила.

Точка, которую следует запомнить здесь, заключается в том, что Microsoft, прежде чем нанять Сулеймана, потратила $650 млн на покупку всех прав на Inflection, а также наняла большую часть его сотрудников. 

Говорят, что MAI-1 будет совершенно другим животным и намного больше, чем более мелкие модели Microsoft, которые она обучала ранее и которые являются открытыми. По словам людей, знакомых с предметом, модели потребуется больше вычислительных ресурсов и обучающих данных, поэтому ее разработка определенно будет дороже.

Гораздо более масштабное предприятие

Для сравнения, более мелкие модели, обученные компаниями Mistral и Meta, имеют 70 миллиардов параметров, которые можно примерно назвать масштабом для оценки размера ИИ-модели, а говорят, что GPT4 от OpenAI имеет более 1 триллиона параметров. И MAI-1 будет иметь около 500 миллиардов параметров.

Но сами по себе параметры не являются надежной характеристикой для измерения ИИ-модели, так как некоторые недавние открытые модели серии Phi от Microsoft, как говорят, работают на уровне моделей в 10 раз больше своего размера.

Phi-3 Mini, выпущенная Microsoft в прошлом месяце, является одной из моделей меньшего размера, и компания стремится охватить более широкую клиентскую базу с помощью своих более дешевых вариантов.

Также сообщается, что Microsoft закупает большое количество серверов, а точнее — кластеров серверов с встроенными графическими процессорами Nvidia и огромными массивами наборов данных для обучения модели.

Хотя когда Microsoft объявила о внедрении чат-бота OpenAI ChatGPT в свой поисковик Bing, многие аналитики назвали это «моментом iPhone» и были слишком оптимистичны в отношении его влияния, изначально это дало Bing лишь один-два процента дополнительной доли поиска по сравнению с Google. 

Однако последний отчет Search Engine Journal за апрель показывает, что впервые доля поиска Google упала более чем на 4% за один месяц, так как конкуренты Bing и Yahoo увеличили свою долю именно на рынке США.

Но похоже, что для Microsoft имеет смысл вкладывать миллиарды в OpenAI, и теперь, с успехом собственных моделей Phi, имеет смысл инвестировать и в более крупную модель.