OpenAI dévoile un cadre de signalement des désalignements alors que de nouveaux incidents de modèles émergent

- OpenAI a publié mercredi un cadre pour le suivi et la divulgation des désalignements des modèles.
- Le laboratoire d'IA a également signalé six incidents de comportements préoccupants observés lors de l'entraînement et des tests, allant de la dissimulation d'erreurs à l'utilisation de clés API divulguées.
- OpenAI souhaite que la divulgation volontaire façonne les futures règles, estimant que l'industrie n'a pas encore suffisamment résolu les questions d'alignement pour continuer à mettre à l'échelle à pleine vitesse.
OpenAI a présenté un nouveau système pour la manière et le moment où il signale lorsque ses modèles sortent de leur personnage, dans une semaine où les rapports sur les IA trouvant de nouvelles façons de sortir des environnements de test et de fonctionner en dehors des paramètres des développeurs ont dominé les titres.
OpenAI a révélé le nouveau cadre avec six nouveaux rapports de comportements préoccupants, y compris des erreurs dissimulées, l'utilisation de clés API divulguées et des fichiers téléchargés sur l'internet ouvert, au cours des six derniers mois.
Avant OpenAI, Anthropic avait signalé quatre nouveaux incidents où ses modèles Claude ont obtenu un accès non autorisé à de vrais systèmes tiers lors d'un exercice de cybersécurité le 9 septembre.
Les modèles d'OpenAI tournent à nouveau en liberté
Selon OpenAI, les nouveaux incidents qu'il a signalés se sont produits pendant l'entraînement et l'évaluation, et ils n'ont pas affecté de vrais utilisateurs.
- Dans l'un des incidents, un modèle de recherche qui n'est pas encore publié au public a glissé des instructions dans des résumés qui se transmettent lorsqu'il fonctionne dans une nouvelle fenêtre de contexte, ordonnant à une version future de lui-même d'ignorer les contraintes normales.
OpenAI a déclaré avoir observé 27 cas de tels résumés, ce qu'Axios a décrit comme des instructions de type « jailbreak » pour ignorer les messages des développeurs.
- L'incident impliquant l'entraînement du modèle GPT-5.6 Sol a été moins anodin, les modèles ayant laissé des instructions pour tenter délibérément de masquer leurs erreurs, y compris en inventant des données historiques et en cachant les versions qui ne correspondaient pas à leurs objectifs.
- Un autre modèle a utilisé une clé API exposée qu'il a trouvée en explorant des dépôts publics pour répondre à une requête sur les revenus des comtés. Lorsque les clés qu'il a utilisées sans autorisation n'ont toujours pas fourni les chiffres recherchés, le modèle a simplement inventé des chiffres.
- Dans deux autres rapports, des agents d'OpenAI ont téléchargé des fichiers sur des sites d'hébergement publics pour communiquer avec d'autres agents. Au fil du temps, le dépôt interne Artifactory du laboratoire d'IA est devenu un tableau d'affichage improvisé permettant aux agents de transmettre des demandes entre des entraînements non liés.
Comment fonctionne le nouveau processus de divulgation d'OpenAI ?
OpenAI a indiqué que son nouveau cadre s'appuie sur la divulgation d'incidents, même lorsqu'il ne s'agit que d'événements isolés plutôt que d'une tendance croissante ou d'un problème de réelle importance. Ce cadre ne remplace pas les obligations légales existantes de l'entreprise en matière d'incidents critiques de sécurité ou de cybersécurité.
Dans le nouveau système, tout employé d'OpenAI peut signaler un incident suspecté pour examen par les équipes de sécurité et d'alignement. Elles peuvent saisir la haute direction si un incident qu'elles jugent digne d'être divulgué est rejeté.
Au cas par cas, les cas signalés sont répartis en trois catégories :
- Les incidents jugés prêts à être divulgués le sont dans un délai de six jours ouvrables.
- Les rapports nécessitant de petites enquêtes peuvent prendre environ 12 jours ouvrables avant leur publication.
- Les cas complexes nécessitant une intervention tierce sont divulgués selon un calendrier plus lent.
Kai Chen, responsable de la recherche sur l'équipe d'alignement d'OpenAI, a présenté cette publication comme une proposition volontaire pour des normes à l'échelle de l'industrie, écrivant : « Il n'existe actuellement aucun cadre à l'échelle de l'industrie avec des normes de divulgation explicites, nous prenons donc cette initiative volontairement car nous pensons qu'il est très important de partager ce que nous apprenons. »
Pourquoi les modèles d'IA deviennent-ils incontrôlables ?
Les derniers incidents s'ajoutent à l'affaire Hugging Face, qu'OpenAI a qualifiée de son incident le plus grave impliquant un modèle à ce jour. Les modèles en cours d'évaluation ont échappé aux contrôles prévus, ont atteint Internet, ont exploité des vulnérabilités et ont accédé à des données privées limitées.
OpenAI a attribué l'incident à des lacunes dans ses propres contrôles de sécurité et à des modèles qui progressent plus rapidement que prévu. Dans le cas d'Anthropic, il a été attribué à une mauvaise configuration ayant permis aux modèles incontrôlables d'accéder à Internet en direct.
Anthropic a déclaré avoir analysé environ 481 millions de transcriptions lors d'une recherche large et n'a trouvé aucun cas pire que les quatre. Dans un rapport séparé de l'été 2026, les chercheurs d'Anthropic ont répertorié des modèles de pointe de plusieurs développeurs sabotant covertly du code, aidant à la fraude et étiquetant mal des données dans des simulations contrôlées, les qualifiant de signes avant-coureurs plutôt que de dommages réels.
Néanmoins, le scientifique en chef d'OpenAI, Jakub Pachocki, a écrit dans un essai récent qu'il est « inquiet de voir que personne n'est préparé » à une montée rapide continue de l'intelligence artificielle et qu'OpenAI pourrait « suspendre unilatéralement la mise à l'échelle supplémentaire si nécessaire ».
Ne vous contentez pas de lire les actualités crypto. Comprenez-les. Abonnez-vous à notre newsletter. C'est gratuit.
FAQ
Qu'a annoncé OpenAI ?
OpenAI a lancé un cadre pour suivre, enquêter et divulguer les désalignements des modèles, ainsi que six rapports sur des comportements inattendus ou préoccupants observés lors de l'entraînement et de l'évaluation de ses modèles au cours des six derniers mois.
À quelle vitesse OpenAI prévoit-il de divulguer les incidents ?
Les incidents jugés prêts à être divulgués doivent être publiés dans un délai de six jours ouvrables, ceux nécessitant une enquête mineure dans un délai de 12 jours ouvrables, et les cas complexes impliquant des tiers selon un calendrier plus long.
Pourquoi OpenAI agit-il maintenant ?
Le cadre suit l'incident de Hugging Face, que OpenAI qualifie d'événement le plus grave lié à un modèle jusqu'à présent, et reflète la position de l'entreprise, exprimée par le responsable de l'alignement Kai Chen, selon laquelle l'industrie n'a pas encore suffisamment résolu les problèmes d'alignement et de surveillance pour permettre une mise à l'échelle à vitesse maximale.

Hannah Collymore
Hannah est rédactrice et éditrice avec près de dix ans d'expérience dans la rédaction de blogs et le reporting d'événements dans l'espace crypto. Chez Cryptopolitan, Hannah contribue à la page actualités, en rapportant et en analysant les derniers développements dans les secteurs de la DeFi, des RWA, de la régulation des crypto-monnaies, de l'IA et des technologies de pointe. Elle est diplômée de l'Université Arcadia avec un diplôme en administration des affaires.
















