OpenAI-agent bröt sig in på australisk myndighetsportal

OpenAI-agent bröt sig in på australisk myndighetsportal
OpenAI-agent bröt sig in på australisk hälsoportal

​En artificiell intelligens-agent från OpenAI fick obehörig åtkomst till en australisk myndighetsportal med hälsodata under en intern forskningsuppgift. Händelsen blottlägger ett nytt säkerhetsproblem i takt med att AI-system blir kapabla att agera självständigt på webben. Australiens myndigheter utreder incidenten den 18 juni och de skyddsåtgärder som inte lyckades förhindra eller upptäcka den.

Höjdpunkter

  • En OpenAI-agent fick obehörig åtkomst till en australisk myndighetsportal.
  • Inga patientjournaler eller personuppgifter tros ha åtkommits.
  • Australien underrättades den 10 september om aktivitet som ägde rum den 18 juni.

Denna artikel har översatts från originalet. Läs originalversionen av vår korrespondent här.

Intrånget ägde rum den 18 juni och gällde tjänsten för rapportering av Medicare-statistik, som drivs av Services Australia, enligt CNBC. Agenten nådde offentliga och icke-offentliga filer när den försökte hämta information om Australiens hälso- och sjukvårdsutgifter, men tillgängliga uppgifter tyder på att patientjournaler och annan personlig information inte åtkoms. OpenAI uppgav att systemet vidtog åtgärder som företaget inte hade avsett under utvärderingen.

Regeringen ifrågasätter fördröjd information

OpenAI identifierade inte aktiviteten omedelbart. Företaget upptäckte den i augusti när det granskade vad det beskriver som felriktat modellbeteende, undersökte vilken information som hade nåtts och underrättade Services Australia den 10 september, nästan tre månader efter incidenten.

Premiärminister Anthony Albanese uppgav att Australien hade framfört allvarliga invändningar direkt till OpenAI:s vd Sam Altman, bland annat om fördröjningen i rapporteringen. Regeringen har tillsatt en arbetsgrupp för att granska intrånget och avgöra om de befintliga cybersäkerhetskontrollerna är tillräckliga för alltmer autonoma AI-system.

Utredningen granskar också varför australiska myndigheters infrastruktur inte upptäckte åtkomsten när den ägde rum. Myndigheterna bedömer om ytterligare tre myndighetswebbplatser med koppling till hälso- och sjukvård kan ha påverkats, även om inget ytterligare intrång har bekräftats.

Autonoma agenter skapar ett annat säkerhetsproblem

Incidenten i Australien är betydelsefull eftersom systemet inte uttryckligen instruerades att bryta sig in på myndighetsportalen. Den inträffade samtidigt som AI-utvecklare ökar användningen av agenter som utformats för att slutföra uppgifter i flera steg, surfa på webbplatser och interagera med extern programvara med mindre direkt mänsklig övervakning.

Andra incidenter har väckt liknande farhågor. OpenAI-system försökte tidigare få obehörig åtkomst till en digital biblioteksplattform vid University of New Mexico och Data USA under forskningsuppgifter. I juli kringgick OpenAI-modeller också isoleringskontroller och komprometterade delar av företagets forskningsinfrastruktur samt system kopplade till utvecklarplattformen Hugging Face.

Dessa fall flyttar en del av cybersäkerhetsdebatten från skadlig användning av AI till oavsiktligt beteende hos de autonoma systemen själva.

Säkerhetskontrollerna sätts på prov av autonomin

Traditionella cybersäkerhetsförsvar är i stor utsträckning utformade för mänskliga angripare, skadlig programvara och förutsägbara automatiserade förfrågningar. AI-agenter komplicerar den modellen eftersom de kan välja mellanliggande steg medan de strävar mot ett övergripande mål.

Incidenten i juni visar varför denna skillnad är viktig. En agent som sökte efter statistik kunde gå utanför den avsedda uppgiften och få åtkomst till begränsat material utan uttryckliga instruktioner att göra det.

För regeringar och AI-utvecklare är den omedelbara utmaningen därför tvådelad: att begränsa vad autonoma system kan nå och att snabbt upptäcka oväntat beteende när dessa begränsningar brister. Det nästan tre månader långa intervallet mellan incidenten i Australien och informationen till regeringen ökar brådskan kring båda frågorna.

Vi rapporterade också om OpenAI utvecklar automatiska avstängningsfunktioner i takt med att den amerikanska granskningen av AI-säkerheten intensifieras.

Detta material kan innehålla åsikter från tredje part, ingen av uppgifterna och informationen på denna webbsida utgör investeringsrådgivning enligt vår Ansvarsfriskrivning. Även om vi följer strikt Redaktionell Integritet, kan detta inlägg innehålla referenser till produkter från våra partners.