Temario del curso
Módulo 1 — Sistemas de IA para ingenieros de seguridad
Lab: Lab 01 — 01-Introduction
Comprensión de la arquitectura.
Temas:
- LLMs vs aplicaciones normales
- Pipelines de inferencia de IA
- Flujo de indicadores (Prompt flow)
- Arquitectura RAG
- Bases de datos vectoriales / embeddings
- Flujos de trabajo agénticos (agentic workflows)
- Llamada a herramientas (tool calling)
- Pasarelas de IA
- Copilotos
- Protocolos MCP y agentes
- Dónde existe la visibilidad del WAF
- Dónde desaparece la visibilidad del WAF
Perspectiva clave: Los WAFs tradicionales a menudo pierden visibilidad después de que el indicador llega al modelo.
Módulo 2 — OWASP GenAI Top 10
Lab: ninguno — recapitulación/discusión interactiva
Categorías principales de ataques de IA.
Temas:
- Inyección de indicadores (Prompt Injection)
- Manipulación insegura de salidas
- Envenenamiento de datos de entrenamiento
- DoS del modelo
- Vulnerabilidades en la cadena de suministro
- Revelación de información sensible
- Agencia excesiva
- Debilidades en vectores/embeddings
- Desinformación
- Consumo sin límites
Incluye:
- Diferencias con el OWASP clásico
- Mapeo a controles defensivos (WAF, pasarela, capa de aplicación)
- Dónde ayuda cada control
- Dónde falla cada control
Módulo 3 — Detección de inyección de indicadores (Prompt Injection)
Lab: Lab 02 — 02-Prompt-Injection
El "momento de la inyección SQL" para IA.
Temas:
- Inyección directa de indicadores
- Inyección indirecta de indicadores
- Instrucciones ocultas
- Ataques basados en documentos
- Inyección HTML/Markdown
- Patrones de elusionamiento (jailbreak)
- Ataques de anulación de contexto
- Ataques de confusión de rol
Estrategias de detección:
- Heurísticas de palabras clave
- Clasificación semántica
- Linting de indicadores
- Aplicación de límites de instrucciones
- Políticas de permiso/prohibición (allow/deny)
- Patrones regex conscientes de IA
Laboratorios prácticos:
- Atacar un chatbot
- Eludir filtros ingenuos
- Construir detección en capas
Módulo 4 — Reglas WAF conscientes de IA (AI-Aware)
Lab: Lab 03 — 03-WAF-Basics
Cómo evolucionan las reglas WAF para sistemas de IA.
- Temas:
- Protección de endpoints LLM
- Protección de API de inferencia
- Límite de velocidad consciente de tokens
- Inspección del tamaño del indicador
- Firmas específicas para IA
- Detección de anomalías en conversaciones
- Patrones de abuso multieje (multi-turn)
- Intentos de enumeración del modelo
- Extracción de datos de inferencia
- Protección contra denegación de billetera
Ejemplos:
- Protección de /v1/chat/completions
- Defensa de APIs en streaming
- Bloqueo de llamadas recursivas de agentes
Módulo 5 — Seguridad de pipelines RAG
Lab: Lab 04 — 04-RAG-Security
Una de las nuevas superficies de ataque más grandes.
Temas:
- Amenazas a bases de datos vectoriales
- Envenenamiento de embeddings
- PDFs/doc maliciosos
- Manipulación de recuperación (retrieval)
- Envenenamiento semántico
- Instrucciones ocultas en documentos
- Contaminación cruzada de documentos
- Exfiltración de datos mediante recuperación
Defensas:
- Sanitización de ingesta
- Puntuación de confianza
- Aislamiento de metadatos
- Procedencia del documento
- Políticas de recuperación
- Segmentación
Caso de estudio: "Sube un PDF envenenado y toma el control del asistente de IA."
Módulo 6 — Seguridad de Agentic AI
Lab: Lab 05 — 05-Agent-Security
Dónde las cosas se vuelven peligrosas.
Temas:
- Agencia excesiva
- Abuso de herramientas
- Cadenas de API
- Bucles autónomos
- Elevación de permisos
- Envenenamiento de memoria
- Ejecución indirecta de herramientas
- Suplantación de identidad del agente
- Fuga de credenciales
- Ataques multi-agente
Defensas:
- Principio de mínimo privilegio para agentes
- Puertas de aprobación (approval gates)
- Motores de política en runtime
- Aislamiento en sandbox
- Credenciales con alcance limitado
- Listas blancas de herramientas
- Intervención humana (human-in-the-loop)
Esta es la sección que a los gerentes suele interesarles más porque el riesgo se vuelve operativo e impacta en el negocio.
Módulo 7 — Seguridad de APIs para IA
Lab: Lab 06 — 06-Denial-of-Wallet
Los sistemas de IA son pesados en API.
Temas:
- Pasarelas API
- Riesgos de GraphQL para IA
- Abuso MCP/API
- Protección JWT
- Seguridad de plugins de IA
- Autenticación de agentes
- Autorización delegada
- Gestión de secretos
- Indicadores firmados (signed prompts)
- Inventario de APIs para IA
Vinculado a: OWASP API Security Top 10
Módulo 8 — Ingeniería de detección e integración con SOC
Lab: Lab 07 — 07-Detection
Defensa operativa.
Temas:
- Telecometría de IA
- Registro de indicadores (prompt logging)
- Análisis de tokens
- Detección de anomalías
- Pipelines SIEM semánticos para IA
- Indicadores de ataque de IA
- Búsqueda de amenazas para abuso LLM
- Observabilidad en runtime de IA
Ejemplos:
- Detección de campañas de elusionamiento (jailbreak)
- Detección de abuso automatizado de agentes
- Identificación de raspado de modelos (model scraping)
Módulo 9 — WAFs en la nube y seguridad de IA
Lab: ninguno — recapitulación/discusión interactiva
Implementaciones específicas de proveedores.
Temas:
- AWS WAF para APIs de IA
- Azure WAF
- Cloudflare AI Gateway
- Pasarelas API
- Filtrado de IA Envoy
- Kong AI Gateway
- Patrones de seguridad de IA NGINX
Comparación:
- WAF tradicional vs pasarela IA vs guardrail en capa de aplicación
- Filtrado basado en proxy vs filtrado semántico
Módulo 10 — Construcción de una defensa de IA en capas
Lab: Lab 08 — 08-Layered-Defense
Conclusión filosófica importante:
Ninguna capa individual puede asegurar la IA (un WAF lo menos de todos, por sí solo).
Los estudiantes construyen un modelo en capas:
- WAF
- Pasarela API
- Pasarela IA
- Guardrails
- Monitoreo en runtime
- Identidad/autorización
- Sandbox
- Aprobación humana
- Observabilidad
- Respuesta a incidentes
Esto se alinea fuertemente con el modelo de "seguridad multicapa".
Módulo ↔ Mapa de Labs
Los laboratorios se ejecutan en orden de laboratorio, que sigue el orden de los módulos.
El curso tiene 10 módulos pero 8 laboratorios: Los módulos 2 y 9 son recapitulaciones/discusiones interactivas y no tienen laboratorio.
Cada laboratorio está etiquetado con su módulo a lo largo de este esquema.
- Lab 01 (Módulo 1)
- Carpeta: 01-Introduction
- Título: Explora un sistema de IA — qué hay en la red
- Lab 02 (Módulo 3)
- Carpeta: 02-Prompt-Injection
- Título: Ataca un chatbot & elude filtrado ingenuo
- Lab 03 (Módulo 4)
- Carpeta: 03-WAF-Basics
- Título: Construye reglas WAF conscientes de IA
- Lab 04 (Módulo 5)
- Carpeta: 04-RAG-Security
- Título: Envenena un pipeline RAG
- Lab 05 (Módulo 6)
- Carpeta: 05-Agent-Security
- Título: Asegura un agente autónomo
- Lab 06 (Módulo 7)
- Carpeta: 06-Denial-of-Wallet
- Título: Detecta ataques de denegación de billetera
- Lab 07 (Módulo 8)
- Carpeta: 07-Detection
- Título: Monitorea patrones de abuso de IA en logs
- Lab 08 (Módulo 10)
- Carpeta: 08-Layered-Defense
- Título: Construye una arquitectura de defensa de IA en capas
Capstone (Proyecto final)
Los estudiantes defienden un asistente de IA empresarial simulado.
Los atacantes intentan:
- inyección de indicadores
- abuso de herramientas
- robo de credenciales
- envenenamiento de recuperación
- consumo excesivo de API
- escalamiento de agente
Los equipos construyen:
- Reglas WAF
- Políticas de pasarela IA
- Detección en runtime
- Guardrails
- Respuesta a incidentes
Requerimientos
- Los estudiantes ya deben comprender la seguridad de HTTP/API, proxies/reverse proxies, autenticación, OWASP Top 10, APIs REST y conceptos básicos de redes en la nube
Público objetivo
- Ingenieros de seguridad & AppSec
- Analistas SOC & ingenieros de detección
- Ingenieros de seguridad de APIs
- Seguridad de Cloud / API / plataforma
- Ingenieros DevSecOps
- Arquitectos de seguridad
- Especialistas en WAF / seguridad de red
- Ingenieros de plataformas de IA
Reseñas (2)
Realmente disfruté aprender sobre los ataques de IA y las herramientas disponibles para comenzar a practicar y utilizarlas activamente en pruebas de seguridad. Adquirí muchos conocimientos que no tenía al inicio, y el curso cumplió con lo que esperaba. Mi parte favorita del entrenamiento fue el navegador Comet, y quedé impresionado por lo que podía hacer. Sin duda seguiré explorándolo más. En general, fue un excelente curso y disfruté aprender sobre los Top 10 de OWASP para GenAI.
Patrick Collins - Optum
Curso - OWASP GenAI Security
Traducción Automática
El conocimiento profesional y la forma en que lo presentó ante nosotros
Miroslav Nachev - PUBLIC COURSE
Curso - Cybersecurity in AI Systems
Traducción Automática