Agentes en producción: AgentOps
Respuesta corta: AgentOps es operar agentes con la misma seriedad que cualquier sistema crítico — despliegues versionados, observabilidad de decisiones (no solo de servicios), evals corriendo en rutina e incidentes con responsable y fecha. Es la última milla: donde la ingeniería agéntica gana o pierde la confianza del negocio.
Lo que hereda y lo que agrega
Un agente en producción hereda todo de DevOps: entornos, despliegues reproducibles, monitoreo, alertas, copias de seguridad. Lo que agrega es la unidad de observabilidad: además de «¿el servicio responde?», la pregunta diaria es «¿el agente está decidiendo bien?» — y esa respuesta viene de las evals y la bitácora corriendo como rutina, no como proyecto.
La rutina diaria que sostiene la confianza
- Evals en cada cambio y en calendario: el set completo contra cada versión nueva, más una corrida periódica contra producción para detectar deriva.
- Tablero de decisiones: éxito, costo, pasos, escalaciones — con alertas en los rangos. La degradación de agentes se resbala, no explota.
- Versionado de comportamiento: prompt, herramientas, límites y modelo exacto. Cada cambio reversible por diseño.
- Revisión de incidentes como hábito: cada caso raro termina en el set de evals — el incidente que no deja caso de prueba se repite.
El incidente típico (y su lección)
No es el servicio caído — eso ya lo detecta cualquier monitor. Es el agente que responde mal durante horas con el sistema en verde: contesta con datos desactualizados, se cicla en un caso nuevo, o empieza a escalar todo a humanos. Por eso el tablero mira decisiones, no solo disponibilidad; y por eso el apagado de los guardrails se prueba antes de necesitarlo.
Cierre de la ruta
Llegaste de «¿qué es un agente?» a operar uno con evals, memoria, límites, gobernanza y observabilidad. Ese recorrido — en español, con ejemplos mexicanos — es exactamente lo que este capítulo construye en comunidad: trae tu sistema a un meetup, o empieza por la guía base si algo se quedó en el camino.
Preguntas frecuentes
- ¿Qué se versiona en un agente?
- Todo lo que cambia su comportamiento: el prompt del sistema, la definición de herramientas, la configuración de límites y el modelo con su versión exacta. Sin ese versionado no puedes saber qué cambió entre el lunes que funcionaba y el martes que no — ni volver atrás cuando toca.
- ¿Cómo detecto que un agente en producción se degradó?
- Vigilando lo que ya mides con tus evals: tasa de éxito, costo por tarea, pasos promedio y tasa de escalación, con alertas cuando se salen de rango. La degradación de agentes rara vez explota — se resbala: un poco más caro, un poco más lento, un poco menos exitoso cada semana. Los tableros existen para notar el resbalón.
- ¿Qué hace diferente a AgentOps de DevOps normal?
- Hereda todo: despliegues, infraestructura, alertas. Lo nuevo es la unidad de observabilidad: en DevOps miras servicios y requests; en AgentOps también miras decisiones — qué eligió hacer el agente y por qué. El incidente clásico de agentes no es «el servicio cayó» sino «respondió mal durante horas y nadie lo notó porque el servicio estaba arriba».
Ruta completa — ahora úsala
La mejor siguiente lección es un sistema tuyo frente a gente que también opera los suyos.