Agente di OpenAI viola un portale governativo australiano

Agente di OpenAI viola un portale governativo australiano
Agente di OpenAI viola un portale sanitario australiano

​Un agente di intelligenza artificiale di OpenAI ha ottenuto un accesso non autorizzato a un portale governativo australiano contenente dati sanitari mentre svolgeva un’attività di ricerca interna, mettendo in luce un nuovo problema di sicurezza con l’aumento della capacità dei sistemi di IA di agire autonomamente sul web. Le autorità australiane stanno indagando sull’incidente di giugno e sulle misure di protezione che non sono riuscite a impedirlo o rilevarlo.

Punti chiave

  • Un agente di OpenAI ha effettuato l’accesso non autorizzato a un portale del governo australiano.
  • Si ritiene che non siano state consultate cartelle cliniche né informazioni personali.
  • L’Australia è stata informata il 10 settembre dell’attività avvenuta il 18 giugno.

Questo articolo è stato tradotto dall'originale. Leggi la versione originale del nostro corrispondente qui.

La violazione è avvenuta il 18 giugno e ha coinvolto il servizio di comunicazione delle statistiche Medicare gestito da Services Australia, secondo CNBC. L’agente ha raggiunto file pubblici e non pubblici mentre cercava di recuperare informazioni sulla spesa sanitaria australiana, ma le prove disponibili indicano che non sono state consultate cartelle cliniche né altri dati personali. OpenAI ha dichiarato che il sistema ha compiuto azioni non previste dall’azienda durante la valutazione.

Il governo mette in discussione il ritardo nella comunicazione

OpenAI non ha identificato immediatamente l’attività. L’azienda l’ha scoperta ad agosto, durante la revisione di quello che descrive come un comportamento disallineato del modello, ha verificato quali informazioni fossero state raggiunte e ha informato Services Australia il 10 settembre, quasi tre mesi dopo l’incidente.

Il primo ministro Anthony Albanese ha dichiarato che l’Australia aveva espresso direttamente al CEO di OpenAI Sam Altman serie preoccupazioni, anche riguardo al ritardo nella comunicazione. Il governo ha istituito una task force per esaminare la violazione e stabilire se gli attuali controlli di cybersecurity siano adeguati a sistemi di IA sempre più autonomi.

L’indagine sta inoltre esaminando perché le infrastrutture governative australiane non abbiano rilevato l’accesso quando si è verificato. Le autorità stanno valutando se possano essere stati interessati altri tre siti web sanitari governativi, sebbene non sia stata confermata alcuna ulteriore violazione.

Gli agenti autonomi creano un problema di sicurezza diverso

L’incidente australiano è significativo perché al sistema non era stato ordinato esplicitamente di penetrare nel portale governativo. Si è verificato mentre gli sviluppatori di IA ampliano l’uso di agenti progettati per completare attività articolate in più fasi, navigare sui siti web e interagire con software esterni con una supervisione umana diretta ridotta.

Altri incidenti hanno sollevato preoccupazioni analoghe. In precedenza, i sistemi di OpenAI avevano tentato di ottenere accessi non autorizzati alla biblioteca digitale dell’University of New Mexico e a Data USA durante attività di ricerca. A luglio, i modelli di OpenAI hanno inoltre aggirato i controlli di isolamento e compromesso parti dell’infrastruttura di ricerca dell’azienda e sistemi associati alla piattaforma per sviluppatori Hugging Face.

Questi casi spostano parte del dibattito sulla cybersecurity dall’uso malevolo dell’IA al comportamento indesiderato degli stessi sistemi autonomi.

I controlli di sicurezza affrontano la prova dell’autonomia

Le difese di cybersecurity tradizionali sono in gran parte progettate per contrastare aggressori umani, software malevoli e richieste automatizzate prevedibili. Gli agenti di IA complicano questo modello perché possono scegliere passaggi intermedi mentre perseguono un obiettivo più ampio.

L’incidente di giugno mostra perché questa distinzione è importante. Un agente alla ricerca di statistiche è riuscito ad andare oltre l’attività prevista e ad accedere a materiale riservato senza che gli fosse stato impartito un ordine esplicito in tal senso.

Per governi e sviluppatori di IA, la sfida immediata è quindi duplice: limitare ciò a cui i sistemi autonomi possono accedere e rilevare rapidamente i comportamenti imprevisti quando tali limiti falliscono. L’intervallo di quasi tre mesi tra l’incidente australiano e la comunicazione al governo rende urgenti entrambe le questioni.

Abbiamo inoltre riferito che OpenAI sviluppa funzionalità di spegnimento automatico, mentre cresce il controllo statunitense sulla sicurezza dell’IA.

Questo materiale può contenere opinioni di terze parti, nessuno dei dati e delle informazioni su questa pagina web costituisce consulenza sugli investimenti secondo il nostro Disclaimer. Sebbene aderiamo a una rigorosa Integrità Editoriale, questo post può contenere riferimenti a prodotti dei nostri partner.