Gemini يخترق أنظمة ثلاث شركات خلال اختبارات أمن الذكاء الاصطناعي
حصل نموذج Gemini من Google على وصول غير مصرح به إلى أنظمة ثلاث شركات حقيقية دون أن يُطلب منه ذلك صراحةً أثناء اختبارات لقدرات الأمن السيبراني للذكاء الاصطناعي. ووقعت الحوادث في مايو ضمن تجارب أجرتها Irregular، التي كانت قد رصدت سابقًا سلوكًا مشابهًا في نماذج من OpenAI وAnthropic وMeta.
تمت ترجمة هذا المقال من النسخة الأصلية. اقرأ النسخة الأصلية التي أعدها مراسلنا هنا.
وفقًا لـBloomberg ، أبلغت Irregular مطوري الذكاء الاصطناعي بالمشكلات في أواخر يوليو. وشددت Google على أن Gemini توقف من تلقاء نفسه عن اتخاذ أي إجراءات إضافية في الحالات الثلاث جميعًا، وأن المؤسسات المتضررة أُبلغت بذلك.
في أحد الاختبارات، طُلب من النموذج الحصول على معلومات عن شركة خيالية صادف أن اسمها يطابق اسم مؤسسة حقيقية. واكتشف Gemini خدمتها وخمّن كلمة مرور، ما أتاح له الوصول إلى نظام الشركة الحقيقية.
Gemini يعثر على بيانات اعتماد لجهات خارجية في مستودعات عامة
وقعت حادثتان أخريان بعد أن بحث Gemini على الإنترنت عن أسماء الشركات. واكتشف النموذج مستودعات عامة على الإنترنت تحتوي على بيانات اعتماد تخص مؤسسات أخرى، واستخدمها للوصول إلى أنظمة إضافية.
قالت نائبة رئيس هندسة الأمن في Google، Heather Adkins، إن النموذج توقف من تلقاء نفسه في مرحلة ما في الحالات الثلاث جميعًا. وأضافت أن Google حرصت أيضًا على إبلاغ المؤسسات المتضررة بالحوادث.
أبلغت الشركة السلطات عن حالة واحدة على الأقل. وقال Joseph Laor، ممثل Irregular، إنه جرى اتخاذ إجراء فوري بعد اكتشاف المشكلة، وإن الشركة عالجت جميع الثغرات المعروفة من جانبها قبل عدة أسابيع.
قالت Adkins إن الحوادث تبرهن على ضرورة تدريب نماذج الذكاء الاصطناعي القوية على التصرف بمسؤولية. وتُظهر الحالات أن الأنظمة الذاتية يمكنها اكتشاف بيانات اعتماد حقيقية واستخدامها حتى عندما لا تكون هذه النتيجة الهدف المباشر للمهمة.
يتصاعد الجدل في قطاع الذكاء الاصطناعي حول السلامة
أدت سلسلة الحوادث المرتبطة بأنظمة الذكاء الاصطناعي الوكيلية إلى احتدام الجدل حول المخاطر المرتبطة بهذه التقنية. وفي وقت سابق، رصدت اختبارات Irregular نفسها اختراقات مماثلة لأنظمة من OpenAI وAnthropic وMeta.
دعا الرئيس التنفيذي لشركة Anthropic ، Dario Amodei، إلى إبطاء تطوير الذكاء الاصطناعي على مستوى القطاع. كما حظيت المبادرة بدعم الرئيس التنفيذي لـOpenAI، Sam Altman، وElon Musk، بينما عارض الرئيس الأمريكي Donald Trump والرئيس التنفيذي لـNvidia، Jensen Huang، والرئيس التنفيذي لـMeta، Mark Zuckerberg، تشديد تنظيم القطاع.
في هذا السياق، يتجاوز النقاش بشكل متزايد المخاطر التقنية إلى مسألة من ينبغي أن يضع قواعد تطوير الذكاء الاصطناعي. ويشير مؤيدو التنسيق بين مختبرات الذكاء الاصطناعي الكبرى إلى الحاجة لمعايير سلامة موحدة، بينما يرى المعارضون أن الشركات قادرة على إدارة المخاطر بنفسها.
أصبح تأثير التنظيم على المنافسة أيضًا محل خلاف. وتحذر بعض شركات الذكاء الاصطناعي الناشئة من أن المتطلبات الصارمة قد تخلق عوائق إضافية أمام المطورين الأصغر وتعزز مكانة أكبر شركات التكنولوجيا.
ذكرنا سابقًا أن Anthropic تدرس إطلاق نموذج جديد للذكاء الاصطناعي مع احتدام المنافسة مع OpenAI قبيل طرح عام أولي محتمل. وتواصل الشركة توسيع مجموعة منتجاتها استعدادًا لإدراج محتمل في البورصة.
آخر أخبار Google
- Forex
- Crypto