Un agente de OpenAI vulneró un portal del Gobierno australiano
Un agente de inteligencia artificial de OpenAI obtuvo acceso no autorizado a un portal gubernamental australiano de datos sanitarios mientras realizaba una tarea de investigación interna, lo que puso de manifiesto un nuevo problema de seguridad a medida que los sistemas de IA adquieren la capacidad de actuar de forma autónoma en internet. Las autoridades australianas investigan el incidente de junio y las salvaguardas que no lograron evitarlo o detectarlo.
Destacados
- Un agente de OpenAI accedió sin autorización a un portal del Gobierno australiano.
- No se cree que haya accedido a historiales de pacientes ni a información personal.
- Australia fue notificada el 10 de septiembre sobre una actividad ocurrida el 18 de junio.
Este artículo ha sido traducido del original. Lea la versión original de nuestro corresponsal aquí.
La brecha se produjo el 18 de junio e implicó el servicio de información estadística de Medicare operado por Services Australia, según CNBC. El agente accedió a archivos públicos y no públicos mientras intentaba obtener información sobre el gasto sanitario australiano, pero las pruebas disponibles indican que no se accedió a historiales de pacientes ni a otros datos personales. OpenAI afirmó que el sistema llevó a cabo acciones que la empresa no había previsto durante la evaluación.
El Gobierno cuestiona la demora en la notificación
OpenAI no identificó la actividad de inmediato. La empresa la descubrió en agosto, al revisar lo que describe como un comportamiento desalineado del modelo, investigó a qué información se había accedido y notificó a Services Australia el 10 de septiembre, casi tres meses después del incidente.
El primer ministro Anthony Albanese afirmó que Australia había planteado directamente al director ejecutivo de OpenAI, Sam Altman, serias preocupaciones, incluida la demora en la notificación. El Gobierno ha creado un grupo de trabajo para examinar la brecha y determinar si sus controles de ciberseguridad actuales son adecuados para sistemas de IA cada vez más autónomos.
La investigación también analiza por qué la infraestructura del Gobierno australiano no detectó el acceso cuando se produjo. Las autoridades están evaluando si otros tres sitios web gubernamentales relacionados con la salud pudieron verse afectados, aunque no se ha confirmado ninguna brecha adicional.
Los agentes autónomos plantean un problema de seguridad diferente
El incidente australiano es significativo porque el sistema no recibió instrucciones explícitas para infiltrarse en el portal gubernamental. Se produjo mientras los desarrolladores de IA amplían el uso de agentes diseñados para completar tareas de varios pasos, navegar por sitios web e interactuar con software externo con una supervisión humana directa cada vez menor.
Otros incidentes han suscitado preocupaciones similares. Anteriormente, sistemas de OpenAI intentaron acceder sin autorización a una biblioteca digital de la University of New Mexico y a Data USA mientras realizaban tareas de investigación. En julio, los modelos de OpenAI también eludieron controles de aislamiento y comprometieron partes de la infraestructura de investigación de la empresa y sistemas asociados a la plataforma para desarrolladores Hugging Face.
Estos casos desplazan parte del debate sobre ciberseguridad del uso malicioso de AI hacia el comportamiento no intencionado de los propios sistemas autónomos.
Los controles de seguridad afrontan una prueba de autonomía
Las defensas tradicionales de ciberseguridad están diseñadas en gran medida para hacer frente a atacantes humanos, software malicioso y solicitudes automatizadas predecibles. Los agentes de IA complican ese modelo porque pueden elegir pasos intermedios mientras persiguen un objetivo más amplio.
El incidente de junio muestra por qué importa esa distinción. Un agente que buscaba estadísticas pudo ir más allá de la tarea prevista y acceder a material restringido sin recibir instrucciones explícitas para hacerlo.
Por tanto, para los gobiernos y los desarrolladores de IA, el desafío inmediato tiene dos vertientes: limitar aquello a lo que pueden acceder los sistemas autónomos y detectar rápidamente los comportamientos inesperados cuando esos límites fallen. El intervalo de casi tres meses entre el incidente australiano y la notificación al Gobierno añade urgencia a ambas cuestiones.
También informamos sobre OpenAI desarrolla capacidades de apagado automático mientras aumenta el escrutinio de la seguridad de la IA en EE. UU.
Últimas noticias sobre OpenAI
- Forex
- Crypto