Les modèles d'IA mis à jour d'Apple sont inférieurs à ceux de la concurrence

Apple a annoncé hier lors de la WWDC 2025 les prochaines mises à jour de son modèle d'IA qui figureront dans toute la suite d'intelligence. Le modèle a été sous-performant sur ses benchmarks par rapport aux anciens modèles de concurrents tels qu'OpenAI. Cependant, le géant de la technologie a fait valoir que l'IA sur l'appareil (On-Device) et le serveur Apple ont été améliorés par rapport à leurs prédécesseurs et peuvent comprendre plus de 15 langues.

Selon les testeurs humains, le nouveau modèle sur l'appareil qui s'exécute localement sur les iPhones et autres appareils a performé de manière similaire aux anciens modèles de Google et Alibaba en ce qui concerne la génération de texte. Les testeurs humains ont classé le serveur Apple, conçu pour s'exécuter dans les centres de données de l'entreprise, derrière le GPT-4o d'OpenAI, vieux d'un an. Dans une évaluation séparée, ils ont préféré le Llama 4 de Meta au serveur Apple pour la capacité d'analyser des images. Les notes ont surpris Apple car Llama 4 Scout a mal performé par rapport aux laboratoires d'IA comme Google, Anthropic et OpenAI.

Les développeurs sont sceptiques quant à la promesse d'innovation d'Apple

Les développeurs se sentent négativement à l'égard des sorties de cette année de la WWDC, y compris le petit modèle d'IA sur l'appareil d'Apple. Atul Kakkar, directeur des produits de l'application de finances personnelles alimentée par l'IA Origi, a révélé qu'en tant que développeur, il n'a pas ressenti l'intensité de l'excitation autour de ce que l'entreprise de Tim Cook a lancé. Il pense que l'événement annuel de la WWDC était autrefois la manifestation la plus médiatisée de la tech, mais qu'il est maintenant entouré de scepticisme quant à la capacité du fabricant d'iPhone de suivre le rythme des géants de l'IA.

Apple ne publie pas de benchmarks pour ses IA, mais se base sur une évaluation tête-à-tête mal documentée

Mais même selon leurs propres standards, les derniers modèles on-device d'Apple sont généralement inférieurs à Gemma 3-4B open source de Google ou Qwen 3-4B

Et son LLM de serveur est similaire à Llama 4 Scout pic.twitter.com/hwpOG5Lgyp

— Ethan Mollick (@emollick) juin 10, 2025

Le géant de la technologie est sous pression pour suivre le rythme en mettant constamment à jour ses outils d'IA pour les développeurs et en créant une expérience utilisateur captivante au sein de la suite Apple Intelligence. Grant McDonald, PDG et cofondateur de l'application Bobo, qui propose des conseils parentaux alimentés par l'IA, a déclaré que l'entreprise de Tim Cook fait des choses intéressantes, mais que cela ne suffit pas à percer dans le bruit ambiant.

McDonald estime que permettre aux développeurs de créer des applications alimentées par l'IA avec ses petits modèles d'IA sur l'appareil pourrait être la valeur que l'entreprise espère offrir. Les petits modèles d'IA sont entraînés sur de petits ensembles de données et utilisent moins de puissance de calcul, ce qui signifie qu'ils peuvent être exécutés sur un iPhone plutôt que sur de grands serveurs dans le cloud. Il a déclaré que l'exécution de modèles sur un appareil est pratiquement moins chère que les modèles basés sur le cloud, tels que GPT et Gemini. 

Les développeurs doutent que les modèles sur l'appareil puissent bien performer par rapport à ceux basés sur le cloud. Un développeur a déclaré qu'ils ne seraient pas en mesure de les affiner sur un jeu de données propriétaire. McDonald a déclaré que les modèles sur l'appareil seront suffisamment bons pour certaines applications, mais pas pour Bobo. L'application parentale a personnalisé son modèle d'IA avec des données propriétaires provenant de consultants en sommeil, de consultants en lactation, de pathologistes de la parole et d'autres experts en parentalité. 

La division de recherche en IA d'Apple peine à rattraper ses concurrents

Le géant de la technologie avait promis une mise à niveau de Siri pour inclure du contenu plus personnalisé, mais cette mise à niveau a été retardée. Certains clients ont intenté un procès à l'entreprise pour commercialisation de produits qui n'ont pas encore été livrés. Les chercheurs ont déclaré que, bien que les modèles d'IA excellent en mathématiques et en sciences, les problèmes complexes ne fournissent que l'illusion de la pensée. 

Le géant de la technologie a retardé le développement de grands modèles de langage et l'implémentation de l'IA dans ses appareils pour rester en dehors de la conversation. À WWDC, l'entreprise a dévoilé Apple Intelligence pour les fonctionnalités d'IA, que la communauté a jugées décevantes. 

Les chercheurs ont découvert que les LRM commencent à échouer après un certain point. Cela montre que tous les modèles de raisonnement présentent un schéma similaire dans lequel la précision diminue progressivement à mesure que la complexité du problème augmente jusqu'à atteindre zéro. Selon les chercheurs, les modèles de raisonnement appliquent initialement plus de jetons de réflexion, mais à mesure que la complexité augmente, ils abandonnent et, de manière contre-intuitive, leur effort de raisonnement commence à diminuer malgré la difficulté croissante du problème. 

Selon Dipanjan Chatterjee, analyste chez Forrester Research, le silence entourant Siri était assourdissant. Il a révélé qu'aucune correction de texte ou aucun emoji mignon ne peut combler l'expérience d'IA interactive tant attendue dont il sait que Siri est capable. Il pense que la fin de Siri est proche si l'entreprise n'agit pas rapidement. L'entreprise n'a pas fourni de calendrier précis pour la mise à niveau de Siri. Cependant, elle a indiqué que cela ne se produirait pas avant l'année prochaine au plus tôt, selon Craig Federighi, un haut dirigeant logiciel de l'entreprise.