¿Qué es la gestión de la postura de seguridad de IA?
La gestión de la postura de seguridad de IA es el proceso continuo de descubrir el uso de IA, evaluar los riesgos que genera, aplicar los controles adecuados y monitorear los cambios en toda una organización.
Esta práctica abarca más que la seguridad de los modelos de IA propios de una organización. También incluye las herramientas y servicios que los empleados usan a diario, los datos a los que esas herramientas pueden acceder y las identidades que conectan los sistemas de IA con las aplicaciones de negocio.
Esto puede incluir:
- Chatbots de IA públicos y asistentes de código
- Funciones de IA integradas en suites de oficina, sistemas de gestión de relaciones con clientes (CRM), plataformas de tickets y otras aplicaciones SaaS
- Extensiones del navegador y aplicaciones de IA locales
- Interfaces de programación de aplicaciones (API) externas, plugins y conectores
- Agentes de IA y cuentas de servicio
- Concesiones de OAuth, claves de API y otras credenciales de máquina
- Datos compartidos con sistemas de IA
- Acciones realizadas por herramientas de IA en nombre de usuarios o aplicaciones
En términos simples, la gestión de la postura de seguridad de IA ayuda a responder cuatro preguntas:
- ¿Qué herramientas y agentes de IA se están usando?
- ¿Quién los usa y a qué pueden acceder?
- ¿Qué datos pueden entrar o salir de esos sistemas?
- ¿Las herramientas, permisos y comportamientos están alineados con la política?
La gestión de la postura de seguridad de IA es una disciplina emergente, por lo que las capacidades varían entre proveedores. Algunas herramientas se enfocan en la actividad del navegador o en aplicaciones en la cloud. Otras se enfocan en el desarrollo de modelos, el comportamiento en tiempo de ejecución o la prevención de pérdida de datos. Antes de elegir una solución, asegúrate de que pueda ver las superficies que importan en tu entorno.