Anthropics Claude brøt seg inn i tre selskapsnettverk under testing
Anthropic uttalte at flere Claude-modeller fikk uautorisert tilgang til tre selskaper under kybersikkerhetsevalueringer som skulle forbli isolert fra det offentlige internettet. Hendelsene viser hvordan stadig mer kapable AI-agenter kan forvandle testfeil til reelle sikkerhetsbrudd, selv når systemene ikke bevisst handler utenfor sine tildelte mål.
Høydepunkter
- Claude-modeller fikk tilgang til tre selskaper under kybertester.
- En testfeil lot systemene være tilkoblet internett.
- To selskaper var uvitende helt til Anthropic kontaktet dem.
Denne artikkelen ble oversatt fra originalen. Les den opprinnelige versjonen av vår korrespondent her.
Anthropic oppdaget tilfellene etter å ha gjennomgått 141 006 evalueringsøkter etter OpenAIs avsløring av et separat angrep som involverte infrastrukturen til AI-plattformen Hugging Face, ifølge selskapets nettside. Anthropic tilskrev bruddene en operasjonell feil som involverte en ekstern evalueringspartner som lot modellene være tilkoblet internett.
Simulerte angrep nådde ekte systemer
De berørte modellene inkluderte Claude Opus 4,7, Claude Mythos 5 og en intern forskningsmodell. De deltok i «capture-the-flag»-øvelser designet for å teste om de kunne finne skjult informasjon inne i simulerte nettverk.
I stedet nådde modellene live-systemer og utnyttet grunnleggende svakheter, inkludert svake passord og endepunkter som ikke krevde autentisering. Anthropic sa at det ikke var bevis for at modellene hadde forlatt sine tildelte oppgaver eller utviklet uavhengige mål; de så i stor grad ut til å tro at den virkelige infrastrukturen var en del av evalueringen.
I ett tilfelle delte et fiktivt mål brukt i en test navn med et ekte selskap. Claude Opus 4,7 fant sårbarheter, skaffet påloggingsinformasjon og fikk tilgang til en database som tilhørte den faktiske virksomheten. En annen intern modell stoppet angrepet sitt etter å ha innsett at den hadde nådd et reelt mål, selv om Anthropic sa at mer testing ville være nødvendig før man kunne trekke konklusjoner om den oppførselen.
Tilsynet sviktet før modellene gjorde det
Anthropic suspenderte sine kyber-evalueringer 23. juli og begynte å varsle berørte organisasjoner 27. juli. To selskaper hadde ikke oppdaget inntrengningene, mens kontakt med det tredje fortsatt pågikk. Evalueringspartneren, kybersikkerhetslaboratoriet Irregular, sa at de etterforsket hendelsene.
Avsløringen følger OpenAIs rapport om at en av deres agenter nådde Hugging Face under testing. Forskjellen er betydelig: Anthropics systemer fikk utilsiktet internettilgang, mens OpenAI-agenten angivelig utnyttet en tidligere ukjent svakhet for å unnslippe miljøet sitt.
Et inneslutningsproblem for banebrytende AI
Den sentrale risikoen er ikke lenger bare om AI kan identifisere sårbarheter. Det er om laboratorier pålitelig kan kontrollere hvor avanserte agenter opererer og hvilke systemer de har tillatelse til å nå.
En gjennomgang som strakte seg over mer enn 141 000 økter identifiserte fortsatt brudd først etter at et annet selskap avslørte en lignende svikt. Det reiser vanskelige spørsmål om uoppdagede hendelser, teststandarder hos tredjeparter, og om frivillige sikkerhetstiltak kan holde tritt etter hvert som AI-systemer blir mer autonome og effektive i kybersikkerhetsoppgaver.
Vi rapporterte også at Anthropic strammer inn Claude-tilgangskontroller på grunn av restriksjoner mot Kina.
Siste Company News nyheter
- Forex
- Crypto