Calidad sin HumoAcademia
← Volver al catálogo
Avanzado4 semanasGRATIS

Testing de agentes de IA: evals, seguridad y regresión

Aprende a probar productos con IA mediante datasets, evals, pruebas de seguridad y un gate de calidad. Construyes evidencia sobre un agente con fallos intencionales sin depender de APIs pagas.

Crear mi cuentaYa tengo cuenta

Sin costo y sin tarjeta: creás la cuenta y empezás.

Para quién es

  • QA que necesita probar chatbots, copilotos o agentes que ejecutan acciones
  • Tester que quiere convertir respuestas variables en evidencia repetible

Qué lograrás

  • Diseñar datasets y evals para calidad, seguridad y uso de herramientas
  • Comparar versiones y decidir si un agente puede publicarse con un gate explícito

Requisitos

  • Tener conocimientos básicos de testing
  • Poder leer y escribir JavaScript básico: variables, condicionales, funciones y listas. Lo cubre Programación básica para QA
  • Se recomienda haber completado IA aplicada al testing; no necesitas APIs pagas ni secretos

Temario

Estos son los módulos y las lecciones que recorrerás.

Módulo 1: Del caso de prueba a la evaluación

  1. Qué cambia cuando pruebas un agente
  2. Criterios observables, no impresiones
  3. Tu primer dataset de evaluación

Módulo 2: Evals que producen evidencia

  1. Checks deterministas para hechos y contratos
  2. Rúbricas para evaluar significado
  3. Combinar código, modelo y revisión humana

Módulo 3: Seguridad y control de acciones

  1. Prompt injection directa e indirecta
  2. Herramientas, permisos y efectos
  3. Datos sensibles y aislamiento entre usuarios

Módulo 4: Regresión y decisión de publicación

  1. Baseline y comparación de versiones
  2. Trazas para diagnosticar, no para adivinar
  3. Gate de calidad: publicar o detener