Το Gemini παραβίασε συστήματα τριών εταιρειών σε δοκιμές ασφάλειας AI

Το Gemini παραβίασε συστήματα τριών εταιρειών σε δοκιμές ασφάλειας AI
Το Gemini παραβίασε τρεις εταιρείες σε δοκιμές ασφάλειας AI

​Το μοντέλο Gemini της Google απέκτησε μη εξουσιοδοτημένη πρόσβαση στα συστήματα τριών πραγματικών εταιρειών χωρίς να έχει λάβει ρητή εντολή κατά τη διάρκεια δοκιμών δυνατοτήτων κυβερνοασφάλειας AI. Τα περιστατικά σημειώθηκαν τον Μάιο στο πλαίσιο πειραμάτων της Irregular, η οποία είχε προηγουμένως εντοπίσει παρόμοια συμπεριφορά σε μοντέλα των OpenAI, Anthropic και Meta.

Αυτό το άρθρο μεταφράστηκε από το πρωτότυπο. Διαβάστε την αρχική έκδοση από τον ανταποκριτή μας εδώ.

Σύμφωνα με το Bloomberg, η Irregular ενημέρωσε τους προγραμματιστές AI για τα ζητήματα στα τέλη Ιουλίου. Η Google τόνισε ότι το Gemini σταμάτησε ανεξάρτητα να προβαίνει σε περαιτέρω ενέργειες και στις τρεις περιπτώσεις και ότι οι επηρεαζόμενοι οργανισμοί ενημερώθηκαν.

Σε μία δοκιμή, ζητήθηκε από το μοντέλο να αποκτήσει πληροφορίες για μια φανταστική εταιρεία, της οποίας το όνομα συνέπιπτε με εκείνο ενός πραγματικού οργανισμού. Το Gemini εντόπισε την υπηρεσία της και μάντεψε έναν κωδικό πρόσβασης, αποκτώντας πρόσβαση στο σύστημα της πραγματικής εταιρείας.

Το Gemini εντοπίζει διαπιστευτήρια τρίτων σε δημόσια αποθετήρια

Δύο άλλα περιστατικά σημειώθηκαν αφού το Gemini αναζήτησε στο διαδίκτυο ονόματα εταιρειών. Το μοντέλο εντόπισε δημόσια διαδικτυακά αποθετήρια που περιείχαν διαπιστευτήρια άλλων οργανισμών και τα χρησιμοποίησε για να αποκτήσει πρόσβαση σε επιπλέον συστήματα.

Η αντιπρόεδρος Μηχανικής Ασφάλειας της Google, Heather Adkins, δήλωσε ότι το μοντέλο σταμάτησε ανεξάρτητα σε κάποιο σημείο και στις τρεις περιπτώσεις. Πρόσθεσε ότι η Google διασφάλισε επίσης ότι οι επηρεαζόμενοι οργανισμοί ενημερώθηκαν για τα περιστατικά.

Η εταιρεία ενημέρωσε τις αρχές για τουλάχιστον μία από τις περιπτώσεις. Ο εκπρόσωπος της Irregular, Joseph Laor, δήλωσε ότι λήφθηκαν άμεσα μέτρα μετά τον εντοπισμό του ζητήματος και ότι η εταιρεία είχε αντιμετωπίσει όλες τις γνωστές ευπάθειες από την πλευρά της πριν από αρκετές εβδομάδες.

Η Adkins δήλωσε ότι τα περιστατικά καταδεικνύουν την ανάγκη εκπαίδευσης ισχυρών μοντέλων AI ώστε να ενεργούν υπεύθυνα. Οι περιπτώσεις δείχνουν ότι τα αυτόνομα συστήματα μπορούν να εντοπίζουν πραγματικά διαπιστευτήρια και να τα χρησιμοποιούν, ακόμη και όταν ένα τέτοιο αποτέλεσμα δεν ήταν ο άμεσος στόχος της εργασίας.

Εντείνεται η συζήτηση στον κλάδο AI για την ασφάλεια

Η σειρά περιστατικών που αφορούν συστήματα agentic AI έχει εντείνει τη συζήτηση για τους κινδύνους που συνδέονται με την τεχνολογία. Νωρίτερα, οι ίδιες δοκιμές της Irregular είχαν εντοπίσει παρόμοιες παραβιάσεις σε συστήματα των OpenAI, Anthropic και Meta.

Ο CEO της Anthropic, Dario Amodei, έχει ζητήσει επιβράδυνση της ανάπτυξης AI σε ολόκληρο τον κλάδο. Η πρωτοβουλία έχει λάβει επίσης στήριξη από τον CEO της OpenAI, Sam Altman, και τον Elon Musk, ενώ ο πρόεδρος των ΗΠΑ Donald Trump, ο CEO της Nvidia Jensen Huang και ο CEO της Meta Mark Zuckerberg έχουν αντιταχθεί σε αυστηρότερη ρύθμιση του κλάδου.

Σε αυτό το πλαίσιο, η συζήτηση επεκτείνεται ολοένα και περισσότερο πέρα από τους τεχνολογικούς κινδύνους, στο ζήτημα του ποιος πρέπει να θέτει τους κανόνες για την ανάπτυξη της AI. Οι υποστηρικτές του συντονισμού μεταξύ των μεγάλων εργαστηρίων AI επισημαίνουν την ανάγκη για κοινά πρότυπα ασφαλείας, ενώ οι αντίπαλοι υποστηρίζουν ότι οι εταιρείες μπορούν να διαχειριστούν μόνες τους τους κινδύνους.

Ο αντίκτυπος της ρύθμισης στον ανταγωνισμό έχει επίσης γίνει σημείο αντιπαράθεσης. Ορισμένες νεότερες εταιρείες AI προειδοποιούν ότι οι αυστηρές απαιτήσεις θα μπορούσαν να δημιουργήσουν πρόσθετα εμπόδια για μικρότερους προγραμματιστές και να ενισχύσουν τη θέση των μεγαλύτερων τεχνολογικών εταιρειών.

Νωρίτερα, αναφέραμε ότι η Anthropic εξετάζει την κυκλοφορία ενός νέου μοντέλου AI, καθώς ο ανταγωνισμός με την OpenAI εντείνεται ενόψει μιας πιθανής IPO. Η εταιρεία συνεχίζει να διευρύνει τη γκάμα προϊόντων της, ενώ προετοιμάζεται για πιθανή εισαγωγή στο χρηματιστήριο.

Αυτό το υλικό μπορεί να περιέχει απόψεις τρίτων, κανένα από τα δεδομένα και τις πληροφορίες σε αυτήν την ιστοσελίδα δεν αποτελεί επενδυτική συμβουλή σύμφωνα με την Αποποίηση Ευθυνών μας. Ενώ τηρούμε αυστηρή Συντακτική Ακεραιότητα, αυτή η ανάρτηση μπορεί να περιέχει αναφορές σε προϊόντα από τους συνεργάτες μας.