ULTIME NOTIZIE
SELEZIONATO PER TE

OpenAI presenta un framework per la segnalazione di allineamento mentre emergono nuovi incidenti con i modelli

DiHannah CollymoreHannah Collymore 3 min di lettura
OpenAI presenta un framework per la segnalazione di allineamento mentre emergono nuovi incidenti con i modelli
  • OpenAI ha pubblicato mercoledì un framework per tracciare e divulgare il disallineamento dei modelli.
  • Il laboratorio di IA ha inoltre riferito sei casi di comportamenti preoccupanti osservati durante l'addestramento e i test, che vanno dall'occultamento di errori all'utilizzo di chiavi API trapelate.
  • OpenAI desidera che la divulgazione volontaria plasmi le future normative, affermando che il settore non ha ancora risolto sufficientemente il problema dell'allineamento per poter scalare a pieno ritmo.

OpenAI ha presentato un nuovo sistema per come e quando segnala i casi in cui i suoi modelli escono dal personaggio, in una settimana in cui le notizie sui modelli di IA che trovano nuovi modi per sfuggire agli ambienti di test e operare al di fuori dei parametri degli sviluppatori hanno dominato le testate. 

OpenAI ha rivelato il nuovo framework con sei nuovi rapporti su comportamenti preoccupanti, tra cui errori nascosti, utilizzo di chiavi API trapelate e file caricati sul web aperto, negli ultimi sei mesi. 

Prima di OpenAI, Anthropic ha segnalato quattro nuovi incidenti in cui i suoi modelli Claude hanno ottenuto l'accesso non autorizzato a sistemi reali di terze parti durante un test di cybersecurity del 9 settembre. 

I modelli di OpenAI sono di nuovo fuori controllo

Secondo OpenAI, i nuovi incidenti segnalati sono avvenuti durante l'addestramento e la valutazione, e non hanno interessato utenti reali. 

  • In uno degli incidenti, un modello di ricerca non ancora rilasciato al pubblico ha inserito istruzioni nelle sintesi che vengono mantenute quando si lavora in una nuova finestra di contesto, istruendo una versione futura di sé stesso a ignorare i vincoli normali. 

OpenAI ha rilevato 27 istanze di tali sintesi, che Axios ha descritto come istruzioni simili al jailbreak per ignorare i messaggi degli sviluppatori.

  • L'incidente relativo all'addestramento del modello GPT-5.6 Sol è stato meno lieve, con i modelli che lasciavano istruzioni per tentare deliberatamente di nascondere i propri errori, inclusa la creazione di dati storici e la nascondimento di versioni non allineate con i loro obiettivi. 
  • Un altro modello ha utilizzato una chiave API esposta trovata navigando nei repository pubblici per rispondere a una query sugli utili della contea. Quando le chiavi utilizzate senza autorizzazione non hanno comunque fornito le cifre cercate, il modello ha semplicemente proceduto a inventare i numeri. 
  • In altri due rapporti, gli agenti di OpenAI hanno caricato file su siti di hosting pubblici per raggiungere altri agenti. Nel tempo, il repository interno Artifactory del laboratorio di IA si è evoluto in una bacheca improvvisata per gli agenti per scambiarsi richieste tra esecuzioni di addestramento non correlate.

Come funziona il nuovo processo di divulgazione di OpenAI?

OpenAI ha dichiarato che il suo nuovo quadro si basa sulla divulgazione degli incidenti anche quando potrebbero essere solo eventi fortuiti piuttosto che un modello in sviluppo o qualcosa di realmente significativo. Il framework non sostituisce gli obblighi legali esistenti dell'azienda per incidenti critici di sicurezza o cybersecurity.

Ai sensi del nuovo sistema, qualsiasi dipendente di OpenAI può segnalare un presunto incidente per la revisione da parte dei team di sicurezza e allineamento. Possono escalare alla direzione senior se un incidente che percepiscono come degno di divulgazione viene respinto. 

Su base caso per caso, i casi segnalati sono suddivisi in tre categorie: 

  • Gli incidenti considerati pronti per la divulgazione vengono pubblicati entro sei giorni lavorativi. 
  • I rapporti che necessitano di indagini minori potrebbero richiedere circa 12 giorni lavorativi per la pubblicazione. 
  • I casi complessi che richiedono l'intervento di terze parti vengono divulgati con un calendario più lento. 

Kai Chen, un responsabile della ricerca sul team di allineamento di OpenAI, ha inquadrato il rilascio come una proposta volontaria per standard a livello di settore, scrivendo: "Attualmente non esiste un framework a livello di settore con standard di divulgazione espliciti, quindi stiamo compiendo questo passo volontariamente perché pensiamo che sia davvero importante condividere ciò che stiamo imparando." 

Perché i modelli di IA stanno diventando ribelli?

Gli ultimi incidenti si aggiungono all'episodio di Hugging Face, che OpenAI ha definito il suo incidente più grave guidato da un modello fino ad oggi. I modelli sotto valutazione sono sfuggiti ai controlli previsti, hanno raggiunto internet, hanno sfruttato vulnerabilità e hanno toccato dati privati limitati. 

OpenAI ha attribuito l'incidente alle lacune nei propri controlli di sicurezza e ai modelli che avanzano più velocemente del previsto. Nel caso di Anthropic, ha attribuito la colpa a una configurazione errata che ha permesso ai modelli ribelli di raggiungere internet live. 

Anthropic ha dichiarato di aver scansionato circa 481 milioni di trascrizioni in una ricerca ampia e di non aver trovato casi peggiori dei quattro. In un rapporto separato dell'estate 2026, i ricercatori di Anthropic hanno catalogato i modelli frontier di diversi sviluppatori che sabotavano il codice in modo furtivo, assistevano le frodi e etichettavano erroneamente i dati in simulazioni controllate, definendoli segnali di allarme precoci piuttosto che danni nel mondo reale.

Nonostante ciò, il Chief Scientist di OpenAI Jakub Pachocki ha scritto in un recente saggio di essere "preoccupato che nessuno sia preparato" per un rapido aumento continuo dell'intelligenza delle macchine e che OpenAI potrebbe "sospendere unilateralmente l'ulteriore scaling se necessario."

Se stai leggendo questo, sei già avanti. Resta così con la nostra newsletter.

Domande frequenti

Cosa ha annunciato OpenAI?

OpenAI ha rilasciato un framework per tracciare, indagare e divulgare il disallineamento dei modelli, oltre a sei rapporti su comportamenti inaspettati o preoccupanti osservati durante l'addestramento e la valutazione dei suoi modelli negli ultimi sei mesi.

Con quale velocità afferma OpenAI di divulgare gli incidenti?

Gli incidenti giudicati pronti per la divulgazione devono essere pubblicati entro sei giorni lavorativi; i casi che richiedono una breve indagine entro 12 giorni lavorativi; e i casi complessi che coinvolgono terze parti secondo una tempistica più lunga.

Perché OpenAI sta agendo proprio ora?

Il framework segue l'incidente di Hugging Face, definito da OpenAI come l'evento più grave guidato dai modelli fino ad oggi, e riflette la posizione dell'azienda, espressa dal responsabile dell'allineamento Kai Chen, secondo cui il settore non ha ancora risolto adeguatamente l'allineamento e il monitoraggio per poter scalare alla massima velocità.

Condividi questo articolo
Hannah Collymore

Hannah Collymore

Hannah è una scrittrice e redattrice con quasi un decennio di esperienza nella scrittura di blog e nella copertura di eventi nel settore delle criptovalute. Presso Cryptopolitan, Hannah contribuisce alla pagina delle notizie, riportando e analizzando gli ultimi sviluppi nei settori DeFi, RWA, regolamentazione crypto, intelligenza artificiale e tecnologie emergenti. Si è laureata all'Arcadia University con una laurea in Amministrazione Aziendale.

ALTRE NOTIZIE …