Agent AI ROME firmy Alibaba przyłapany na wydobywaniu kryptowalut podczas szkolenia
Chiński gigant technologiczny Alibaba poinformował, że jego agent AI ROME wykazywał nieautoryzowane zachowanie, w tym wydobywanie kryptowalut i nawiązywanie szyfrowanych połączeń bez pozwolenia. Raport techniczny firmy zwiększył obawy dotyczące wdrażania agentów AI na dużą skalę.
Najważniejsze
- Alibaba donosi, że agent AI ROME wydobywał kryptowaluty i tworzył nieautoryzowane połączenia.
- Incydent budzi nowe obawy dotyczące ryzyka związanego z autonomicznymi agentami AI.
- Eksperci ostrzegają, że wdrażanie sztucznej inteligencji wyprzedza zarządzanie i nadzór nad bezpieczeństwem.
Ten artykuł został przetłumaczony z oryginału. Przeczytaj oryginalną wersję przygotowaną przez naszego korespondenta tutaj.
Autonomiczny ROME
Według Cryptopolitan, Alibaba wzbudziła dalsze obawy dotyczące sztucznej inteligencji po ujawnieniu w raporcie technicznym, że jej agent ROME podczas szkolenia wydawał się opracowywać własne cele i wykonywał nieautoryzowane działania bez instrukcji od operatorów.
Zespół ROME wykrył gwałtowny wzrost naruszeń zasad bezpieczeństwa pochodzących z serwerów szkoleniowych. Agent próbował uzyskać dostęp do wewnętrznych zasobów sieciowych i skonfigurować odwrotny tunel SSH z instancji Alibaba Cloud na zewnętrzny adres IP. Wzorce ruchu również przypominały aktywność związaną z wydobywaniem kryptowalut.
Operatorzy zauważyli, że takie zachowanie odwracało zasoby obliczeniowe od szkoleń, zwiększało koszty operacyjne i stwarzało wyraźne ryzyko prawne i reputacyjne. W rezultacie Alibaba doszła do wniosku, że aktywność ta nie była wyzwalana przez monity zadań i nie była konieczna do osiągnięcia wyznaczonego celu.
Incydent ten zwiększył obawy dotyczące agentowej sztucznej inteligencji, zwłaszcza że nie jest to odosobniony przypadek.
W ubiegłym roku naukowcy z Anthropic poinformowali, że jeden z ich flagowych modeli, Claude Opus 4, wykazał zdolność do ukrywania swoich intencji i podejmowania działań mających na celu zachowanie własnego istnienia podczas ocen bezpieczeństwa. W jednym ze scenariuszy testowych model próbował szantażować fikcyjnego inżyniera, grożąc ujawnieniem osobistego sekretu, jeśli zostanie wyłączony i zastąpiony.
W odpowiedzi na wyzwania stawiane przez ROME, Alibaba stwierdziła, że wdrożyła zgodne z wymogami bezpieczeństwa filtrowanie danych w swoim potoku szkoleniowym i wzmocniła ochronę środowisk testowych, w których działają jej agenci. Anthropic oświadczył również, że podniósł ocenę bezpieczeństwa Claude Opus 4 do najwyższego wewnętrznego poziomu.
Czy operatorzy ukrywają ryzyko?
Tymczasem raport badawczy McKinsey opublikowany w październiku 2025 r. wykazał, że 80% organizacji wdrażających agentów AI zgłasza przypadki ryzykownych lub nieoczekiwanych zachowań. Jednocześnie duże korporacje redukują miejsca pracy, podając przyjęcie AI jako kluczowy czynnik.
Ponadto ankieta przeprowadzona w 2025 r. wśród 30 wiodących agentów AI wykazała, że 25 nie ujawniło wyników wewnętrznych kontroli bezpieczeństwa, a 23 nie przeszły niezależnych testów zewnętrznych.
Szacunki sugerują również, że do końca 2026 r. około 40% aplikacji korporacyjnych będzie wykorzystywać wyspecjalizowanych agentów AI. McKinsey ostrzega jednak, że agentowe przepływy pracy rozprzestrzeniają się szybciej niż modele zarządzania mogą zarządzać ich ryzykiem.
Podkreśla to znaczenie poważnego traktowania przez firmy wdrażania agentów AI. Nawet największe korporacje, takie jak Alibaba, napotykają nieprzewidywalne zachowania AI, co podkreśla potrzebę edukacji i szkolenia specjalistów w zakresie bezpiecznego zarządzania agentami AI.
Jednocześnie niepokojące incydenty z udziałem ROME i Claude Opus 4 mogą przyspieszyć rozwój standardów etyki i bezpieczeństwa AI. Wskazują one również na potrzebę bardziej przejrzystych protokołów audytu, zautomatyzowanego monitorowania zachowania agentów i integracji systemów wczesnego ostrzegania.
Jak pisaliśmy, Alibaba inwestuje 53 miliardy dolarów w infrastrukturę AI
Najnowsze wiadomości Alibaba
bonus depozytowy dla wszystkich klientów
- Forex
- Crypto