Cerrar el ciclo: registro de fallos y observabilidad
Lo que no se observa no se cultiva. Esta clase acompaña a un agente de atención de una clínica desde el primer error hasta la autonomía supervisada, y muestra lo mínimo que necesitas registrar para cambiar "creo que mejoró" por "mejoró de 88% a 95%".
4Encontrar el patrón de error que vale la pena corregir primero
Objetivo: registrar cada ejecución con el mínimo de campos y convertir un error real en una regla nueva, comparando el resultado antes y después.
01 · El caso de la clínica, en seis etapas
Desplázate para seguirlo. Los números son del caso descrito en el proyecto.
Clase 601 · El caso de la clínica, en seis etapasDesplázate para seguirlo. Los números son del caso descrito en el proyecto.
1/7
Ambiente inicial
Médicos y especialidades, horarios de cada uno, procedimientos y duración, reglas de la clínica y acceso a la agenda. El agente solo sugiere; la recepcionista aprueba cada cita.
Desplázate por la página: cada paso de abajo ilumina su parte del diagrama.
1/7
Ambiente inicial
Médicos y especialidades, horarios de cada uno, procedimientos y duración, reglas de la clínica y acceso a la agenda. El agente solo sugiere; la recepcionista aprueba cada cita.
2/7
Primer fallo
El agente agenda a las 19:30 con un médico que no atiende después de las 18:00. La agenda mostraba "libre", pero agenda libre no es médico disponible. El fallo se registra con fecha, decisión, resultado y causa raíz.
3/7
Regla nueva
"Antes de sugerir, consultar la agenda Y el horario de atención del médico. Fuera del horario, nunca, aunque la agenda muestre libre." Vale desde la próxima ejecución en adelante.
4/7
Evaluación
De las 20 interacciones siguientes, 18 correctas. Los 2 fallos se convierten en dos reglas más: la duración del procedimiento debe caber en el horario, y 15 minutos de intervalo entre consultas.
5/7
Estabilización
40 interacciones en dos semanas: 20/20 en cada una, cero correcciones de la recepcionista, tiempo de respuesta de 4 minutos a 45 segundos.
6/7
Autonomía
Con el historial, el agente pasa a confirmar solo. El humano recibe un informe diario y revisa solo lo que el agente marcó como excepción: horario límite, paciente nuevo, procedimiento largo.
7/7
Después de 2 meses
Reglas: de 5 genéricas a 14 nacidas de fallos reales. 320 ejecuciones registradas, 7 fallos documentados, 97,8% de acierto, versión v1.0 → v1.4. El modelo es el mismo del primer día; si la clínica cambia de modelo, el jardín continúa.
02 · La diferencia entre dos versiones
Lo que muestra la observabilidad (ejemplo del proyecto, 100 ejecuciones en cada versión).
1. v1.0 · 88%
Tres patrones de error: fuera del horario del profesional (5), horario corto para el procedimiento (4) y respuesta ambigua sobre cancelación (3).
Cada patrón generó una regla nueva: cuatro reglas modificadas.
2. v1.1 · 95%
Los patrones 1 y 2 desaparecieron. El 3 bajó de 3 a 1 ocurrencia.
Apareció un patrón nuevo: dos procedimientos simultáneos que piden el mismo consultorio. El ciclo continúa.
La inversiónDe 88% a 95% con reglas y correcciones. Nadie cambió el modelo: miraron los datos y ajustaron el entorno.
3. Lo que se puede decidir
Comparar versiones en los mismos escenarios. Encontrar patrones ("70% de los errores son procedimientos largos"). Medir el costo del error ("cada reprogramación cuesta R$ 150"). Decidir dónde invertir primero.
03 · Registro de ejecuciones
Empieza con los tres campos. La versión completa llega cuando el volumen lo pida.
EXECUCOES.md · mínimo viable
| fecha | lo que se pidió | lo que se entregó | ¿salió bien? (sí / no / parcial) |
|---|---|---|---|
| | | | |
EXECUCOES.md · completo
| fecha | versión del agente | objetivo | decisión tomada | herramienta usada | tiempo | costo | resultado | error | intervención humana | evaluación (correcta / parcial / errónea) | corrección aplicada |
|---|---|---|---|---|---|---|---|---|---|---|---|
| | | | | | | | | | | | |
De la falla a la regla (modelo de registro)
## Falla <fecha>
Lo que pasó:
Decisión que tomó el agente:
Causa raíz (¿faltó contexto, regla, ejemplo o herramienta?):
Corrección mínima posible:
Regla nueva (texto exacto que entró en el archivo):
Versión del agente: v1.0 → v1.1
Cómo sabré si se resolvió: próximas 20 ejecuciones, contar aciertos
04 · Práctica
Una semana de observación.
1 · Una semana de registro
5 min por día
Para la función que elegiste, registra cada ejecución en EXECUCOES.md con los tres campos mínimos.
Listo cuando: el archivo tiene al menos 10 líneas y puedes decir la tasa de acierto de la semana (ej.: 8 de 10).
2 · Una regla nacida de un error
20 min
Toma la falla que más se repitió en la semana y completa el modelo "de la falla a la regla". Pon la regla en el archivo y sube la versión.
Listo cuando: la regla está escrita en el archivo del agente, la versión subió (v1.0 → v1.1) y las próximas ejecuciones se están contando para comparar.
05 · Prueba rápida
4 preguntas.
Pregunta 1 de 4
La agenda mostraba el horario como libre y el agente agendó fuera del horario de atención del médico. ¿Cuál fue la causa raíz?
Correcto
Agenda libre no es médico disponible. La corrección fue una regla permanente en el entorno, no un modelo nuevo.
Tres campos ya permiten calcular el acierto y cerrar el primer ciclo. Más campos entran cuando el volumen lo pida.
No es esa
Tres campos ya permiten calcular el acierto y cerrar el primer ciclo. Más campos entran cuando el volumen lo pida.Repasar: Registro de ejecuciones
Pregunta 3 de 4
En la v1.1 apareció un patrón de error nuevo (conflicto de consultorio). Eso significa que...
Correcto
Los patrones antiguos desaparecieron y la tasa subió de 88% a 95%. Aparecen patrones nuevos cuando los antiguos dejan de estorbar.
No es esa
Los patrones antiguos desaparecieron y la tasa subió de 88% a 95%. Aparecen patrones nuevos cuando los antiguos dejan de estorbar.Repasar: La diferencia entre dos versiones
Pregunta 4 de 4
Después de 2 meses, ¿qué tiene la clínica que un competidor no puede copiar contratando el mismo modelo?competencia
Correcto
El jardín es de la clínica. Si cambia de modelo, el jardín sigue; quien copia el modelo empieza de cero.