Verifica con evidencias
Construye pruebas objetivas y rúbricas que expliquen la evaluación editorial.
Qué es
Una verificación objetiva tiene una regla reproducible: el archivo existe, la suma concilia y el campo obligatorio está presente. Una evaluación editorial compara la salida con una rúbrica: claridad, relevancia y adecuación al público. Un mismo requisito puede combinar ambas cosas.
Por qué aprender
El video usa la revisión como etapa central. Para aplicarla bien, evita confundir “otro agente miró” con prueba factual. El conteo de imágenes es verificable; que una imagen realmente explique una idea exige interpretación y evidencia localizada.
Conceptos clave
- Objetivo: regla y resultado observables.
- Editorial: criterios y ejemplos anclados.
- Híbrido: medida más inspección.
- Evidencia: archivo, fragmento, captura o prueba.
Qué es
Una prueba útil debe fallar ante un error plausible. Si solo verifica que el archivo existe, un informe vacío pasa. En el ejemplo, compara el total, los canales, la cantidad de registros y el comportamiento para entrada inválida.
Por qué aprender
Las pruebas derivadas ciegamente de la implementación pueden repetir el mismo error. Usa al menos un resultado calculado por otro camino: manualmente en un caso pequeño, o mediante una regla independiente. Verifica también salidas que no deberían producirse.
Conceptos clave
- Aserción: condición esperada.
- Oráculo: fuente del resultado correcto.
- Prueba negativa: error tratado.
- Independencia: reducir error compartido.
Qué es
Una rúbrica explica qué significa cada nivel de calidad. Usa pocos criterios y descripciones concretas. Para claridad, por ejemplo, el nivel 0 es contradictorio, 1 exige adivinación, 2 es comprensible con revisión y 3 es directo y autosuficiente.
Por qué aprender
Sin anclas, dos evaluadores usan la misma palabra para estándares distintos. Una nota alta aislada no ayuda a corregir. Exige que la evaluación cite el fragmento y proponga el cambio mínimo capaz de resolver el problema.
Conceptos clave
- Criterio: dimensión evaluada.
- Ancla: ejemplo del nivel.
- Fragmento: ubicación de la evidencia.
- Corrección: acción limitada y verificable.
Qué es
Un LLM como juez aplica criterios y señala posibles fallas. Puede interpretar lenguaje e imágenes, pero también puede dejar pasar errores o aprobar su propia hipótesis. Una segunda instancia no garantiza independencia del razonamiento.
Por qué aprender
Separa la generación de la evaluación y proporciona al evaluador contrato, entrada y salida. Cuando sea posible, oculta qué configuración generó cada versión. Revisa una muestra humana para calibrar si el juez realmente está usando la rúbrica.
Conceptos clave
- Separación: la revisión tiene su propio contexto y objetivo.
- Cegamiento: reduce preferencia por etiqueta.
- Calibración: comparar con juicio humano.
- Límite: el juez no sustituye la fuente primaria.
Qué es
El informe de calidad conecta criterio, resultado y evidencia. “Todo verificado” no indica qué se abrió, calculó o inspeccionó. Una buena entrega también incluye limitaciones y elementos que aún requieren una decisión.
Por qué aprender
Este documento reduce el trabajo de revisión humana porque dirige la atención. Pero el propio QA también puede estar equivocado: abre muestras de las evidencias y confirma si lo que se describió realmente ocurrió.
Conceptos clave
- Estado: pasó, falló o no verificado.
- Evidencia: referencia ubicable.
- Acción: corrección o pendiente.
- Trazabilidad: entrada y versión usadas.
Qué es
El ciclo es producir, verificar, corregir y verificar de nuevo. Define un tope de intentos y una condición de salida. En el laboratorio, usa hasta dos rondas de corrección antes de reportar un bloqueo persistente para análisis.
Por qué aprender
Más rondas no implican más calidad. El agente puede alternar entre dos soluciones o gastar recursos sin mejorar. Un tope vuelve el costo predecible y obliga a explicar lo que falta, en lugar de declarar victoria por agotamiento.
Conceptos clave
- Aceptar: todos los bloqueantes pasaron.
- Corrección: enfócate en la falla observada.
- Regresión: lo que funcionaba sigue funcionando.
- Parada: límite o dependencia externa.