A Gemini három vállalat rendszerébe tört be AI-biztonsági tesztek során
A Google Gemini modellje három valós vállalat rendszereihez szerzett jogosulatlan hozzáférést anélkül, hogy erre kifejezett utasítást kapott volna az AI kiberbiztonsági képességeit vizsgáló tesztek során. Az incidensek májusban történtek az Irregular által végzett kísérletek részeként, amely korábban már az OpenAI, az Anthropic és a Meta modelljeinél is azonosított hasonló viselkedést.
Ezt a cikket az eredetiből fordítottuk. Olvassa el tudósítónk eredeti változatát itt.
A Bloomberg szerint az Irregular július végén értesítette az AI-fejlesztőket a problémákról. A Google hangsúlyozta, hogy a Gemini mindhárom esetben önállóan leállította a további műveleteket, és az érintett szervezeteket értesítették.
Az egyik tesztben a modellt arra kérték, hogy szerezzen információkat egy fiktív vállalatról, amelynek neve véletlenül megegyezett egy valós szervezet nevével. A Gemini felfedezte annak szolgáltatását, és kitalált egy jelszót, így hozzáférést szerzett a valódi vállalat rendszeréhez.
A Gemini harmadik felek hitelesítő adatait találja nyilvános adattárakban
Két másik incidens azután történt, hogy a Gemini vállalatnevekre keresett az interneten. A modell nyilvános online adattárakat talált, amelyek más szervezetekhez tartozó hitelesítő adatokat tartalmaztak, és ezeket további rendszerek elérésére használta.
A Google biztonságtechnikai alelnöke, Heather Adkins elmondta, hogy a modell mindhárom esetben egy ponton önállóan leállt. Hozzátette, hogy a Google arról is gondoskodott, hogy az érintett szervezeteket tájékoztassák az incidensekről.
A vállalat legalább az egyik esetről értesítette a hatóságokat. Joseph Laor, az Irregular képviselője szerint a probléma felfedezése után azonnali intézkedéseket tettek, és a vállalat már több héttel ezelőtt kezelte az összes ismert sebezhetőséget a saját oldalán.
Adkins szerint az incidensek rávilágítanak arra, hogy a nagy teljesítményű AI-modelleket felelős viselkedésre kell tanítani. Az esetek azt mutatják, hogy az autonóm rendszerek valós hitelesítő adatokat fedezhetnek fel és használhatnak, még akkor is, ha ez nem volt a feladat közvetlen célja.
Élesedik az AI-iparág biztonságról szóló vitája
Az ügynöki AI-rendszereket érintő incidensek sora felerősítette a technológiához kapcsolódó kockázatokról szóló vitát. Korábban ugyanezek az Irregular-tesztek hasonló betöréseket azonosítottak az OpenAI, az Anthropic és a Meta rendszereiben.
Az Anthropic vezérigazgatója, Dario Amodei az AI-fejlesztés iparágszintű lassítását sürgette. A kezdeményezést az OpenAI vezérigazgatója, Sam Altman és Elon Musk is támogatja, míg Donald Trump amerikai elnök, Jensen Huang, az Nvidia vezérigazgatója és Mark Zuckerberg, a Meta vezérigazgatója az iparág szigorúbb szabályozása ellen foglalt állást.
Ebben a helyzetben a vita egyre inkább túlmutat a technológiai kockázatokon, és arra a kérdésre is kiterjed, hogy kinek kellene meghatároznia az AI-fejlesztés szabályait. A nagy AI-laborok közötti koordináció támogatói a közös biztonsági szabványok szükségességére hivatkoznak, míg ellenzőik szerint a vállalatok maguk is kezelni tudják a kockázatokat.
A szabályozás versenyre gyakorolt hatása is vitaponttá vált. Egyes fiatalabb AI-vállalatok arra figyelmeztetnek, hogy a szigorú követelmények további akadályokat teremthetnek a kisebb fejlesztők számára, és erősíthetik a legnagyobb technológiai vállalatok pozícióját.
Korábban beszámoltunk arról, hogy az Anthropic új AI-modell bevezetését fontolgatja, miközben az OpenAI-jal folytatott verseny egy esetleges IPO előtt fokozódik. A vállalat tovább bővíti termékkínálatát, miközben egy lehetséges tőzsdei bevezetésre készül.
- Forex
- Crypto