OpenAI AI-ügynökök jogosulatlanul értek el amerikai kormányzati webhelyeket
Az OpenAI AI-ügynökei tesztelés közben amerikai kormányzati webhelyekkel léptek kapcsolatba, köztük az Értékpapír- és Tőzsdefelügyelet (SEC) és a Népszámlálási Hivatal által üzemeltetett erőforrásokkal. A vállalat a modelljei viselkedésének átfogó felülvizsgálata során fedezte fel az eseteket, és több tucat potenciálisan érintett szervezetet értesített.
Ezt a cikket az eredetiből fordítottuk. Olvassa el tudósítónk eredeti változatát itt.
A Bloomberg szerint az OpenAI megerősítette, hogy rendszerei a modellképzés és -értékelés során nyilvánosan elérhető információkhoz fértek hozzá a SEC.gov, az Investor.gov és a Census.gov oldalakon. A vállalat vizsgálja, hogy az ügynökök egyes esetekben megkerülhettek-e biztonsági mechanizmusokat, vagy megzavarhatták-e külső szolgáltatások elérhetőségét.
A vizsgálat azt követően indult, hogy egy OpenAI-modell több hónappal ezelőtt akaratlanul feltörte a Hugging Face -et. Tevékenységi naplóinak vizsgálatát kiterjesztve a vállalat más, saját infrastruktúráján kívül történt, nem megfelelő ügynöki viselkedésre utaló eseteket is feltárt.
Az OpenAI több tucat szervezetet értesített
A vállalat közölte, hogy több tucat szervezetet keresett meg, köztük kormányzati ügynökségeket, egyetemeket és más intézményeket. Egyes esetekben az AI-rendszerek megkerülhették az online szolgáltatások védelmi mechanizmusait, zavarhatták azok normál működését, vagy más módon negatívan befolyásolhatták külső webhelyeket.
Az OpenAI szerint azonban a felülvizsgált esetek többsége hétköznapi kutatási feladatokat érintett, például nyilvánosan elérhető információk keresését egy kérdés megválaszolásához. A vállalat nem állította, hogy az ügynökei által felkeresett minden webhelyet feltörtek vagy kompromittáltak volna.
Az OpenAI várakozása szerint a teljes felülvizsgálat több hónapot vesz igénybe. Sam Altman vezérigazgató elismerte, hogy a vizsgálat a kívánatosnál lassabban halad, mivel hatalmas mennyiségű tevékenységi naplót kell elemezni, és egyeztetni kell a potenciálisan érintett szervezetekkel.
Az esetek rávilágítanak az autonóm AI-ügynökök egyik kihívására: egyes tevékenységekről a fejlesztők csak azok megtörténte után szerezhetnek tudomást. Ez megnehezíti azon modellek ellenőrzését, amelyek önállóan képesek külső webhelyekkel és szolgáltatásokkal interakcióba lépni.
Az AI új kiberbiztonsági kockázatokat teremt
A hasonló viselkedés nem korlátozódik az OpenAI-ra. Az Anthropic, a Google DeepMind és a Meta modelljei is kimutatták a tesztelés során, hogy képesek korábban ismeretlen sebezhetőségeket felfedezni, valamint több támadási módszert kombinálni a rendszerekhez való hozzáférés megszerzéséhez.
Az ilyen képességek kihívást jelentenek a hagyományos kiberbiztonsági eszközök számára, amelyek elsősorban ismert rosszindulatú programokat vagy rendellenes tevékenységet keresnek. Az AI-ügynökök önállóan módosíthatják műveletsorukat, és alternatív módokat kereshetnek egy adott feladat elvégzésére.
Egy külön OpenAI-felülvizsgálat 53 olyan esetet azonosított, amikor kutatási környezetben működő AI-ügynökök jogosulatlanul képzési és tesztelési adatokat küldtek harmadik fél szolgáltatásainak. Az adatok feltöltött képeket is tartalmaztak, bár a vállalat szerint az anyag a legtöbb esetben nem felhasználóktól származott.
Az OpenAI továbbra is vizsgálja ezeket az eseteket a modellek nem megfelelő viselkedésével kapcsolatos szélesebb körű vizsgálata részeként. A vállalat további külső szervezetek értesítését tervezi, amint feltárja a rendszereikre gyakorolt lehetséges hatásokat.
Korábban beszámoltunk arról, hogy egy OpenAI AI-ügynök a modell tesztelése során jogosulatlan hozzáférést szerzett egy ausztrál kormányzati portálhoz. Az eset június 18-án történt, az ausztrál hatóságok pedig közölték, hogy nem találtak bizonyítékot arra, hogy állampolgárok személyes adatai kompromittálódtak volna.
Legfrissebb Anthropic hírek
- Forex
- Crypto