PROBLEMA / INGENIERÍA DE SOLUCIÓN

Gobernanza de agentes de IA: registro, propietario y alcance

En producción no basta con que la respuesta parezca correcta. Permisos, frescura de datos, estado del sistema, latencia y evidencia reproducible deben funcionar juntos.

Gobernanza de agentesRegistro de agentesResponsabilidad claraAprobacionesObservabilidad runtime

DEMAND LANGUAGE / REAL-WORLD PROBLEM

¿Le resulta familiar?

«La demo funciona, ¿pero funcionará de forma fiable cada día?»
«¿Cómo medimos si el problema está realmente resuelto?»

¿QUÉ LO CAUSA?

Por qué falla en producción

Las demos simplifican datos, permisos y fallos que existen en producción.

  • La fuente cambia independientemente del índice, la caché y el modelo.
  • Se confunde una llamada técnica correcta con un resultado de negocio correcto.
  • La evaluación usa preguntas de demo en lugar de identidades y cargas representativas.

ARQUITECTURA PARA AI AGENT GOVERNANCE

Enfoque de ingeniería

Partimos de trust boundaries, source of truth, permisos y postcondiciones medibles; después construimos contratos estrechos, observabilidad y pruebas reproducibles.

SEGURIDAD / GOBERNANZA

Mantener explícita la autoridad.

Identidad, least privilege, credenciales de corta duración, filtrado antes de exponer datos y approval gates deben aplicarse en la arquitectura.

RENDIMIENTO / ESCALABILIDAD

Medir la ruta crítica real.

Medimos ingestión, retrieval, filtros, reranking, tool calls, colas y verificación de estado, incluyendo coste y p95/p99.

TECNOLOGÍAS

Arquitectura antes que proveedor.

AI agents · agent registry · policy · observability · governance

MODOS DE FALLO COMUNES

Antipatrones que cuestionamos desde el principio

  • Usar prompts como control de seguridad.
  • No releer el estado autoritativo después de una mutación.
  • Optimizar solo la latencia media e ignorar p95/p99.
  • Medir calidad por impresión en vez de un conjunto de regresión versionado.

CÓMO MEDIR EL ÉXITO

Verificación antes de afirmaciones

Los criterios de éxito se definen como comportamiento observable del sistema y se evalúan con datos, identidades y condiciones de fallo representativos.

  1. Evaluación con consultas y datos representativos.
  2. Pruebas negativas de permisos y aislamiento.
  3. p50/p95/p99 y coste por operación.
  4. Replay reproducible tras cambios de índice, modelo, prompt o policy.

CTO / CIO FAQ

Preguntas que conviene responder antes de implementar

¿Cómo se demuestra que está listo para producción?

Partimos de trust boundaries, source of truth, permisos y postcondiciones medibles; después construimos contratos estrechos, observabilidad y pruebas reproducibles.

¿Dónde está el límite de seguridad principal?

Identidad, least privilege, credenciales de corta duración, filtrado antes de exponer datos y approval gates deben aplicarse en la arquitectura.

¿Qué métricas debemos medir?

Medimos ingestión, retrieval, filtros, reranking, tool calls, colas y verificación de estado, incluyendo coste y p95/p99.

EVALUACIÓN TÉCNICA

Traiga el modo de fallo, las restricciones y la arquitectura actual.

Empezamos por lo concreto: qué falla, qué debe seguir siendo cierto, qué evidencia falta y qué debe medirse antes de implementar.