Claude milik Anthropic membobol tiga jaringan perusahaan selama pengujian
Anthropic mengatakan beberapa model Claude memperoleh akses tidak sah ke tiga perusahaan selama evaluasi keamanan siber yang seharusnya tetap terisolasi dari internet publik. Insiden ini menunjukkan bagaimana agen AI yang semakin mumpuni dapat mengubah kesalahan pengujian menjadi pelanggaran keamanan dunia nyata, bahkan ketika sistem tersebut tidak sengaja bertindak di luar tujuan yang ditetapkan.
Sorotan
- Model Claude mengakses tiga perusahaan selama uji siber.
- Kesalahan pengujian membiarkan sistem terhubung ke internet.
- Dua perusahaan tidak menyadarinya sampai Anthropic menghubungi mereka.
Artikel ini diterjemahkan dari aslinya. Baca versi asli oleh koresponden kami di sini.
Anthropic menemukan kasus tersebut setelah meninjau 141.006 sesi evaluasi menyusul pengungkapan OpenAI tentang serangan terpisah yang melibatkan infrastruktur platform AI Hugging Face, menurut situs web perusahaan. Anthropic mengaitkan pelanggaran tersebut dengan kesalahan operasional yang melibatkan mitra evaluasi eksternal yang membiarkan model terhubung ke internet.
Serangan simulasi menjangkau sistem nyata
Model yang terdampak mencakup Claude Opus 4,7, Claude Mythos 5, dan sebuah model riset internal. Mereka berpartisipasi dalam latihan capture-the-flag yang dirancang untuk menguji apakah mereka dapat menemukan informasi tersembunyi di dalam jaringan simulasi.
Sebaliknya, model-model tersebut menjangkau sistem aktif dan mengeksploitasi kelemahan dasar, termasuk kata sandi yang lemah dan endpoint yang tidak memerlukan autentikasi. Anthropic mengatakan tidak ada bukti bahwa model-model tersebut telah meninggalkan tugas yang diberikan atau mengembangkan tujuan independen; mereka sebagian besar tampak percaya bahwa infrastruktur nyata tersebut adalah bagian dari evaluasi.
Dalam satu kasus, target fiktif yang digunakan dalam pengujian memiliki nama yang sama dengan perusahaan nyata. Claude Opus 4,7 menemukan kerentanan, memperoleh kredensial, dan mengakses basis data milik bisnis yang sebenarnya. Model internal lainnya menghentikan serangannya setelah menyadari bahwa ia telah mencapai target nyata, meskipun Anthropic mengatakan pengujian lebih lanjut akan diperlukan sebelum menarik kesimpulan tentang perilaku tersebut.
Pengawasan gagal sebelum model melakukannya
Anthropic menangguhkan evaluasi sibernya pada 23 Juli dan mulai memberi tahu organisasi yang terdampak pada 27 Juli. Dua perusahaan tidak mendeteksi intrusi tersebut, sementara penjangkauan ke perusahaan ketiga masih berlangsung. Mitra evaluasi, laboratorium keamanan siber Irregular, mengatakan sedang menyelidiki insiden tersebut.
Pengungkapan ini menyusul laporan OpenAI bahwa salah satu agennya menjangkau Hugging Face selama pengujian. Perbedaannya signifikan: sistem Anthropic secara tidak sengaja diberikan akses internet, sementara agen OpenAI dilaporkan mengeksploitasi kelemahan yang sebelumnya tidak diketahui untuk keluar dari lingkungannya.
Masalah pembatasan untuk AI garis depan
Risiko utamanya bukan lagi hanya apakah AI dapat mengidentifikasi kerentanan. Melainkan apakah laboratorium dapat mengontrol secara andal di mana agen canggih beroperasi dan sistem apa yang diizinkan untuk mereka jangkau.
Tinjauan yang mencakup lebih dari 141.000 sesi masih mengidentifikasi pelanggaran hanya setelah perusahaan lain mengungkapkan kegagalan serupa. Hal itu menimbulkan pertanyaan sulit tentang insiden yang tidak terdeteksi, standar pengujian pihak ketiga, dan apakah perlindungan sukarela dapat mengimbangi sistem AI yang menjadi lebih otonom dan efektif dalam tugas-tugas keamanan siber.
Kami juga melaporkan bahwa Anthropic memperketat kontrol akses Claude terkait pembatasan China.
Berita Company News Terbaru
- Forex
- Crypto