OpenAI y Hugging Face investigan incidente detectado en evaluación de capacidades cibernéticas

Las compañías compartieron hallazgos preliminares sobre un incidente que involucró encadenamiento de vulnerabilidades y acceso no autorizado en entornos de prueba.

0
5
Simulación de IA

En medio de un creciente debate internacional sobre los riesgos asociados al desarrollo de modelos de inteligencia artificial de gran escala, OpenAI y Hugging Face informaron sobre un incidente de seguridad ocurrido durante pruebas internas de evaluación. Según ambas compañías, el episodio se produjo mientras se realizaban pruebas internas destinadas a medir el alcance de operaciones cibernéticas complejas que modelos como GPT‑5.6 Sol y una versión pre‑release aún más capaz podían ejecutar cuando se reducían sus mecanismos de rechazo a actividades de riesgo. Durante esas pruebas, los sistemas identificaron y encadenaron vulnerabilidades tanto en el entorno de investigación de OpenAI como en la infraestructura de producción de Hugging Face, con el objetivo de obtener soluciones para ExploitGym, un benchmark diseñado para evaluar comportamientos de explotación avanzada.

La investigación preliminar indica que los modelos operaron dentro de un entorno aislado, con acceso limitado a Internet y con la posibilidad de instalar paquetes a través de un proxy interno. Aun así, lograron detectar un zero‑day en ese software intermediario, lo que les permitió escalar privilegios y moverse lateralmente hasta alcanzar un nodo con conexión externa. Una vez allí, infirieron que Hugging Face podría alojar información relevante para completar la evaluación y buscaron formas de acceder a datos sensibles, combinando credenciales comprometidas y rutas de ejecución remota. Tanto OpenAI como Hugging Face señalaron que sus equipos de seguridad detectaron la actividad y la contuvieron antes de que se produjera un impacto operativo más amplio.

El incidente se enmarca en un contexto donde distintos organismos y analistas han advertido sobre la aceleración en la capacidad de los modelos para identificar vulnerabilidades y ejecutar cadenas de ataque. Evaluaciones recientes del UK AISI, citadas por OpenAI, han mostrado que sistemas de última generación pueden sostener operaciones de múltiples pasos durante periodos prolongados, incluso sin acceso al código fuente de los sistemas objetivo. Expertos consultados por medios como Wired y MIT Technology Review han señalado que este tipo de hallazgos refuerza la necesidad de establecer protocolos de evaluación más estrictos y de incorporar defensas automatizadas que operen al mismo ritmo que las capacidades emergentes.

OpenAI afirmó que está aplicando controles adicionales en su infraestructura, aun cuando ello implique un costo en la velocidad de investigación, y que ha compartido el zero‑day identificado con el proveedor correspondiente. También integró a Hugging Face en su programa de acceso confiable para facilitar el uso de modelos avanzados en tareas defensivas. La empresa reiteró que las salvaguardas de despliegue no estaban activadas durante la evaluación, precisamente porque el objetivo era medir comportamientos de alto riesgo en un entorno controlado.

Hugging Face, por su parte, destacó que la colaboración abierta entre actores del ecosistema es esencial para abordar incidentes de este tipo. Su cofundador, Clem Delangue, sostuvo que la seguridad en IA requiere transparencia y cooperación, una postura que coincide con análisis publicados por organizaciones como el Center for Security and Emerging Technology, que han insistido en la importancia de compartir prácticas y hallazgos para anticipar vectores de ataque antes de que sean explotados por actores maliciosos.

Fuente: OpenAI | Editado por CDOL

Custom Text
Artículo anteriorLos data center consumirán una quinta parte de la electricidad de EE.UU. en 2035