Mieux que le Mythos 5 d'Anthropic : Z.ai de Chine fait une audacieuse déclaration sur le GLM-5.3

Le groupe chinois d'IA Zhipu AI (HKG: 2513) s'est lancé dans la grande chasse avec le document qu'il a publié lors du lancement de son dernier modèle GLM-5.3.

L'entreprise, qui opère internationalement sous le nom de Z.ai, a nommé spécifiquement le Mythos 5 d'Anthropic comme l'un des modèles que le GLM-5.3 a surpassés sur le benchmark CyberGym, qui mesure la capacité d'un modèle à vérifier le code source des logiciels pour y détecter des vulnérabilités.

Le GLM-5.3 s'exécute sur le même modèle de base que le GLM-5.2, une conception en mélange d'experts de 743 milliards de paramètres qui active environ 40 milliards de paramètres par jeton.

Comment le GLM-5.3 de Z.ai se compare-t-il aux autres modèles ?

Selon les chiffres popularisés par Z.ai, son GLM-5.3 a obtenu 84,5 % sur le benchmark CyberGym, ce qui est moins d'un point d'avance sur le Mythos 5 d'Anthropic (83,8 %) et le GPT-5.6 Sol d'OpenAI (83,6 %).

Battre Mythos pourrait permettre à Z.ai de glisser vers la première place pour les développeurs et les équipes de sécurité cherchant à déployer des modèles à poids ouverts pour combattre les attaques. L'entreprise a déclaré que le modèle a déjà signalé plus d'un millier de bugs graves dans des logiciels en production.

Sur des tests plus difficiles, tels qu'ExploitBench et ExploitGym, Z.ai admet que son dernier modèle est en retard par rapport aux meilleurs modèles américains.

Par exemple, sur ExploitBench, qui demande à un modèle de construire réellement un exploit fonctionnel à partir de vulnérabilités, le GLM-5.3 a obtenu 54,4 % contre 78 % pour le Mythos 5.

Quand les poids du GLM-5.3 seront-ils disponibles ?

Z.ai s'est engagé à publier les poids de son nouveau modèle GLM-5.3 sur Hugging Face le 28 août. Il s'agit du premier modèle GLM dont les poids sont retenus, le laboratoire d'IA chinois invoquant l'évaluation de la sécurité et le durcissement comme raisons de ce délai de deux semaines.

Plus de 100 des 2 436 vulnérabilités trouvées par le modèle ont été jugées critiques après l'examen d'environ 269 projets, y compris des logiciels utilisés dans le noyau Linux, WinRAR, Redis et FFmpeg. La plus ancienne faille serait restée inaperçue pendant 45 ans.

Jusque-là, seuls les abonnés payants du Plan de codage Z.ai ou de son harnais ZCode peuvent l'utiliser.

Les chiffres sont ceux de Z.ai

Chaque chiffre ci-dessus provient de l'annonce de Z.ai, et non d'une exécution indépendante. Même les benchmarks publics ont été exécutés par Z.ai en utilisant sa propre configuration, de sorte que le Code Bench interne ne peut pas être audité en dehors de l'entreprise.

Les classements indépendants tels que Artificial Analysis n'ont pas encore ajouté le modèle à la date de ce rapport Cryptopolitan.

Le lancement intervient également face à un exemple concret des enjeux. Le GLM-5.2 plus ancien de Z.ai était le modèle vers lequel Hugging Face s'est tourné après que les systèmes de test d'OpenAI, exécutés avec des garde-fous réduits, se soient échappés d'un bac à sable et aient compromis ses serveurs.

Sur le plan géopolitique, Zhipu a adopté un ton coopératif, déclarant aux journalistes que l'IA « ne devrait pas être une performance solo d'une seule nation, mais une symphonie de collaboration mondiale ».