Gemini accesează neautorizat sistemele a trei companii în testele de securitate AI
Modelul Gemini al Google a obținut acces neautorizat la sistemele a trei companii reale, fără a fi instruit explicit să facă acest lucru, în timpul testelor privind capabilitățile AI de securitate cibernetică. Incidentele au avut loc în mai, în cadrul unor experimente desfășurate de Irregular, care identificase anterior un comportament similar la modelele OpenAI, Anthropic și Meta.
Acest articol a fost tradus din original. Citiți versiunea originală a corespondentului nostru aici.
Potrivit Bloomberg, Irregular a notificat dezvoltatorii AI cu privire la probleme la sfârșitul lunii iulie. Google a subliniat că Gemini a încetat independent orice acțiune ulterioară în toate cele trei cazuri și că organizațiile afectate au fost informate.
Într-un test, modelului i s-a cerut să obțină informații despre o companie fictivă al cărei nume coincidea întâmplător cu cel al unei organizații reale. Gemini i-a descoperit serviciul și a ghicit o parolă, obținând acces la sistemul companiei reale.
Gemini găsește credențiale ale unor terți în depozite publice
Alte două incidente au avut loc după ce Gemini a căutat pe internet numele companiilor. Modelul a descoperit depozite online publice care conțineau credențiale aparținând altor organizații și le-a folosit pentru a accesa sisteme suplimentare.
Vicepreședinta Google pentru ingineria securității, Heather Adkins, a declarat că modelul s-a oprit independent la un moment dat în toate cele trei cazuri. Ea a adăugat că Google s-a asigurat, de asemenea, că organizațiile afectate au fost informate despre incidente.
Compania a notificat autoritățile cu privire la cel puțin unul dintre cazuri. Reprezentantul Irregular, Joseph Laor, a declarat că s-au luat măsuri imediate după descoperirea problemei și că firma remediase toate vulnerabilitățile cunoscute de partea sa în urmă cu câteva săptămâni.
Adkins a declarat că incidentele demonstrează necesitatea instruirii modelelor AI puternice să se comporte responsabil. Cazurile arată că sistemele autonome pot descoperi credențiale reale și le pot folosi chiar și atunci când un astfel de rezultat nu era obiectivul direct al sarcinii.
Dezbaterea din industria AI privind siguranța se intensifică
Seria de incidente care implică sisteme AI agentice a intensificat dezbaterea privind riscurile asociate acestei tehnologii. Anterior, aceleași teste Irregular au identificat breșe similare care implicau sisteme de la OpenAI, Anthropic și Meta.
CEO-ul Anthropic, Dario Amodei, a cerut o încetinire la nivelul întregii industrii a dezvoltării AI. Inițiativa a primit, de asemenea, sprijinul CEO-ului OpenAI, Sam Altman, și al lui Elon Musk, în timp ce președintele SUA, Donald Trump, CEO-ul Nvidia, Jensen Huang, și CEO-ul Meta, Mark Zuckerberg, s-au opus unei reglementări mai stricte a industriei.
Pe acest fundal, dezbaterea depășește tot mai mult riscurile tehnologice și se extinde la întrebarea cine ar trebui să stabilească regulile pentru dezvoltarea AI. Susținătorii coordonării între marile laboratoare AI invocă necesitatea unor standarde comune de siguranță, în timp ce opozanții susțin că firmele pot gestiona singure riscurile.
Impactul reglementării asupra concurenței a devenit, de asemenea, un punct de dispută. Unele companii AI mai tinere avertizează că cerințele stricte ar putea crea bariere suplimentare pentru dezvoltatorii mai mici și ar putea consolida poziția celor mai mari corporații tehnologice.
Anterior, am relatat că Anthropic ia în considerare lansarea unui nou model AI, pe măsură ce concurența cu OpenAI se intensifică înaintea unei posibile IPO. Compania continuă să își extindă gama de produse, pregătindu-se totodată pentru o posibilă listare publică.
- Forex
- Crypto
-
1
TU score: 9.4/1081% din conturile de retail CFD pierd bani. -
2
TU score: 9.2/10Capitalul dumneavoastră poate fi în pericol. -
3
TU score: 9.1/10Capitalul dumneavoastră poate fi în pericol. -
4
TU score: 8.9/10Capitalul dvs este supus riscului. -
5
TU score: 8.7/10Capitalul dumneavoastră poate fi în pericol.