Advertisements

Riesgos de la IA generativa y ciberseguridad: seguridad LLM

Advertisements
Ataca y defiende LLM en la práctica: inyección de prompts, jailbreaking, barreras de protección, red team y cumplimiento
1
1/5
(77) Ratings
4 students
Created by Dr. Amar Massoud (Español)
Advertisements

What you'll learn

  • Explicar cómo funciona un LLM desde el punto de vista de la seguridad y mapear su superficie de ataque
  • Ejecutar inyecciones de prompts directas e indirectas y jailbreaks en un laboratorio local
  • Relacionar cada ataque con los riesgos del OWASP Top 10 para LLM y las técnicas de MITRE ATLAS
  • Diseñar una defensa en profundidad: validación de entradas, barreras de protección, filtrado de salidas y aislamiento
  • Monitorizar un sistema de IA generativa y detectar incidentes de seguridad
  • Integrar la seguridad en el ciclo de desarrollo de IA y dirigir un ejercicio de red team
  • Aplicar el Reglamento Europeo de Inteligencia Artificial, el NIST AI RMF y la ISO/IEC 42001 a un sistema de IA generativa
  • Evaluar los riesgos emergentes de la IA agéntica y de la criptografía poscuántica
This course includes:
5 total hours on-demand video
0 articles
17 downloadable resources
45 lessons
Full lifetime access
Access on mobile and TV
Certificate of completion
Advertisements

Course content

Requirements

  • Nociones básicas de informática o ciberseguridad; no se necesita experiencia previa en seguridad de IA
  • Un ordenador con Windows, macOS o Linux en el que puedas instalar Ollama y descargar un modelo de unos 2 GB
  • Leer inglés básico ayuda con la interfaz del laboratorio, que se mantiene en inglés

Description

Este curso utiliza inteligencia artificial.

Qué esperar: Unas 5 horas de vídeo. Calcula 1 hora para instalar las herramientas del laboratorio (Ollama y un modelo local) y después entre 9 y 12 horas para completar los 14 laboratorios y sus tareas. Los 14 laboratorios funcionan en un único archivo en tu propio ordenador, con un modelo Llama local y gratuito a través de Ollama, así que no necesitas clave de API ni cuenta de pago. La interfaz del laboratorio, los prompts de ataque que se escriben y las respuestas del modelo se mantienen en inglés.

La IA generativa llegó a producción más rápido que las prácticas de seguridad capaces de protegerla. Inyección de prompts, jailbreaking, envenenamiento de datos, alucinaciones explotadas: los ataques contra los grandes modelos de lenguaje no se parecen a los que conocen los equipos de seguridad. Este curso te enseña a entenderlos, a ejecutarlos tú mismo en un entorno seguro y a construir las defensas que los detienen.

Todo el curso sigue a una empresa ficticia, NovaStar AI, y sus tres productos: NovaAssist, un chatbot de atención al cliente; NovaCode, un asistente de programación, y NovaComply, una herramienta de documentación regulatoria. Junto a su CISO, Alex Rivera, y su equipo, analizamos cada incidente, reproducimos el ataque en el laboratorio y aplicamos el control que lo habría evitado.

A lo largo de nueve secciones vamos a:

  • Mapear la superficie de ataque de una aplicación LLM con el OWASP Top 10 para LLM y MITRE ATLAS
  • Lanzar inyecciones de prompts directas e indirectas y jailbreaks contra un modelo local
  • Tratar el envenenamiento de datos, el sesgo, el SSRF, el agotamiento de recursos y las alucinaciones como amenazas
  • Construir una defensa en profundidad: validación de entradas, barreras de protección, filtrado de salidas, aislamiento y monitorización
  • Integrar la seguridad en el ciclo de desarrollo y dirigir ejercicios de red team
  • Dominar el Reglamento Europeo de Inteligencia Artificial, el NIST AI RMF, la ISO/IEC 42001, las auditorías y la propiedad intelectual
  • Anticipar las amenazas de la IA agéntica, de la IA contra la IA y de la computación cuántica

Cada sección termina con un cuestionario, y el curso culmina con un ejercicio completo de red team que pone en juego todo lo aprendido. Terminarás con un método concreto para evaluar, atacar y proteger los sistemas de IA generativa de tu organización.

Who this course is for:

  • Profesionales de ciberseguridad que deben proteger aplicaciones de IA generativa
  • Desarrolladores y arquitectos que integran LLM en sus productos
  • CISO y responsables de riesgos y cumplimiento que supervisan el uso de la IA
  • Pentesters y miembros de red team que quieren probar sistemas de IA
  • Cualquier persona que quiera entender en la práctica los riesgos de seguridad de la IA generativa
Advertisements
ED2F6BC15852EF5F28C3
Advertisements
Advertisements
Free Online Courses with Certificates
Logo
Register New Account