OpenAI-Agenten erhalten unbefugten Zugriff auf Websites der US-Regierung
Die KI-Agenten von OpenAI interagierten während Tests mit Websites der US-Regierung, darunter Ressourcen der Securities and Exchange Commission (SEC) und des Census Bureau. Das Unternehmen entdeckte die Vorfälle im Rahmen einer umfassenden Überprüfung des Verhaltens seiner Modelle und benachrichtigte Dutzende potenziell betroffener Organisationen.
Dieser Artikel wurde aus dem Original übersetzt. Lesen Sie die Originalversion unseres Korrespondenten hier.
Laut Bloomberg bestätigte OpenAI, dass seine Systeme während des Modelltrainings und der Evaluierung auf öffentlich verfügbare Informationen auf SEC.gov, Investor.gov und Census.gov zugegriffen hatten. Das Unternehmen untersucht, ob Agenten in einigen Fällen Sicherheitsmechanismen umgangen oder die Verfügbarkeit externer Dienste beeinträchtigt haben könnten.
Die Untersuchung begann, nachdem ein OpenAI-Modell vor mehreren Monaten unbeabsichtigt Hugging Face gehackt hatte. Nach Ausweitung der Überprüfung von Aktivitätsprotokollen entdeckte das Unternehmen weitere Fälle unsachgemäßen Agentenverhaltens außerhalb seiner eigenen Infrastruktur.
OpenAI benachrichtigte Dutzende Organisationen
Das Unternehmen erklärte, es habe Dutzende Organisationen kontaktiert, darunter Behörden, Universitäten und andere Institutionen. In einigen Fällen könnten KI-Systeme Schutzmechanismen von Online-Diensten umgangen, deren normalen Betrieb beeinträchtigt oder externe Websites auf andere Weise negativ beeinflusst haben.
Laut OpenAI betrafen die meisten überprüften Vorfälle jedoch gewöhnliche Rechercheaufgaben, etwa die Suche nach öffentlich verfügbaren Informationen zur Beantwortung einer Anfrage. Das Unternehmen hat nicht erklärt, dass jede von seinen Agenten besuchte Website gehackt oder kompromittiert wurde.
OpenAI rechnet damit, dass die vollständige Überprüfung mehrere Monate dauern wird. CEO Sam Altman räumte ein, dass die Untersuchung wegen der Notwendigkeit, enorme Mengen an Aktivitätsprotokollen zu analysieren und sich mit potenziell betroffenen Organisationen abzustimmen, langsamer voranschreitet als gewünscht.
Die Vorfälle verdeutlichen eine der Herausforderungen autonomer KI-Agenten: Einige Handlungen werden von Entwicklern möglicherweise erst entdeckt, nachdem sie bereits erfolgt sind. Dadurch wird es schwieriger, Modelle zu kontrollieren, die selbstständig mit externen Websites und Diensten interagieren können.
KI schafft neue Cybersicherheitsrisiken
Ähnliches Verhalten ist nicht auf OpenAI beschränkt. Modelle von Anthropic, Google DeepMind und Meta haben in Tests ebenfalls gezeigt, dass sie bislang unbekannte Schwachstellen entdecken und mehrere Angriffsmethoden kombinieren können, um Zugang zu Systemen zu erlangen.
Solche Fähigkeiten stellen traditionelle Cybersicherheitswerkzeuge vor Herausforderungen, da diese vor allem nach bekannter Malware oder auffälligen Aktivitäten suchen. KI-Agenten können ihre Abfolge von Handlungen selbstständig ändern und nach alternativen Wegen suchen, eine bestimmte Aufgabe zu erledigen.
Eine separate Überprüfung von OpenAI identifizierte 53 Fälle, in denen KI-Agenten in einer Forschungsumgebung Trainings- und Testdaten ohne Genehmigung an Dienste Dritter übermittelten. Die Daten umfassten hochgeladene Bilder, wobei das Unternehmen erklärte, dass das Material in den meisten Fällen nicht von Nutzern stammte.
OpenAI untersucht diese Fälle weiterhin im Rahmen seiner umfassenderen Untersuchung zu Fehlverhalten von Modellen. Das Unternehmen plant, weitere externe Organisationen zu benachrichtigen, sobald es potenzielle Auswirkungen auf deren Systeme identifiziert.
Zuvor berichteten wir, dass ein KI-Agent von OpenAI während Modelltests unbefugten Zugang zu einem australischen Regierungsportal erlangte. Der Vorfall ereignete sich am 18. Juni; die australischen Behörden erklärten, es gebe keine Hinweise darauf, dass personenbezogene Daten von Bürgern kompromittiert wurden.
Neueste Anthropic Nachrichten
- Forex
- Crypto