Rúbrica: La fundición de autómatas
[!IMPORTANT] Usa únicamente evidencia observable. La confianza sin una ruta, un diff, el resultado de un comando, una traza o un registro de la plataforma no otorga puntos.
Puntuación
| Criterio | 0 — Ausente | 1 — Inicial | 2 — Competente | 3 — Ejemplar |
|---|---|---|---|---|
| Modelo técnico | Faltan términos o se confunden. | Algunos términos son correctos, pero los límites no están claros. | Se distinguen los roles, harnesses, destinos, entornos y primitivas pertinentes. | Los límites y las limitaciones son precisos y se justifican con documentación oficial. |
| Evidencia de la capacidad | No hay un artefacto específico de la aventura ni salida del verificador. | Existe un artefacto, pero no demuestra la capacidad indicada. | La aplicación con la versión fijada de Copilot SDK y el contrato de evaluación superan node labs/automaton-foundry/verify.js; se registra evidencia de ejecución cuando la autenticación está disponible. |
La evidencia también demuestra las limitaciones, la recuperación ante fallos y la reproducibilidad independiente. |
| Evidencia de Ask | No hay evidencia de investigación. | Los hallazgos son principalmente conversacionales. | Los hallazgos citan evidencia actual del repositorio o de la plataforma. | Los conflictos y la incertidumbre se resuelven o se trasladan explícitamente a los siguientes pasos. |
| Calidad de Plan | No hay un plan acotado ni restablecimiento. | El alcance, los riesgos o las comprobaciones están incompletos. | Se definen el alcance, los objetivos excluidos, los riesgos, la verificación, la revisión y el restablecimiento. | Se minimiza la autoridad y se explicitan los puntos de control de dependencias, detención y alternativas. |
| Ejecución de Agent | No hay resultado ni alternativa. | El trabajo es amplio, incompleto o está escasamente verificado. | El trabajo sigue el plan y supera la comprobación pertinente disponible. | Las iteraciones son precisas, cuentan con abundante evidencia y no contienen cambios ajenos al alcance. |
| Análisis de fallos | Se omitió el ejercicio de fallo. | Se observó el fallo, pero no se explicó. | La causa raíz y la recuperación son correctas. | La lección se convierte en una protección o regla de decisión reutilizable. |
| Revisión y evidencia | No hay revisión independiente. | Existen resultados sin trazabilidad con los criterios. | Los artefactos y las comprobaciones se revisan frente a los criterios de aceptación. | La evidencia es reproducible y otra persona puede verificarla de forma independiente. |
| Limpieza | Permanece el estado del ejercicio. | La limpieza es parcial. | El restablecimiento está completo y se verifica el estado limpio. | También se controlan las credenciales, las sesiones, los servidores y los recursos en la nube. |
Evidencia requerida
-
La aplicación con la versión fijada de Copilot SDK y el contrato de evaluación superan
node labs/automaton-foundry/verify.js; se registra evidencia de ejecución cuando la autenticación está disponible. -
Hallazgos de Ask fundamentados en las fuentes.
-
Un Plan acotado con criterios de aceptación y restablecimiento.
-
Salida de Agent, diff o alternativa en papel documentada.
-
Salida de verificación pertinente.
-
Análisis del fallo intencional y recuperación.
-
Resultado del desafío independiente.
-
Notas explícitas sobre el estado y la disponibilidad de las funciones.
-
Registro de limpieza verificada.
Regla de finalización
- Obtén al menos 16/24 en total.
- Obtén 2 o más en Evidencia de la capacidad, Evidencia de Ask, Calidad de Plan, Ejecución de Agent y Revisión y evidencia.
- Cualquier secreto expuesto, acción destructiva no aprobada, resultado inventado o afirmación de disponibilidad sin respaldo significa no completado, independientemente de la puntuación.
Preguntas para la revisión
- ¿Está cada afirmación importante vinculada a evidencia actual?
- ¿Se utilizó la autoridad mínima necesaria?
- ¿Las comprobaciones observan el comportamiento solicitado?
- ¿Están etiquetadas con precisión las capacidades en versión preliminar, experimentales y no disponibles?
- ¿Puede otra persona reproducir tanto el resultado como la limpieza?
Resultado
| Elemento | Valor |
|---|---|
| Puntuación total | /24 |
| Criterios obligatorios cumplidos | Sí / No |
| Motivo de descalificación por seguridad presente | Sí / No |
| Decisión final | Completado / Revisar |
| Evidencia de la revisión |