K-Forge / K-Forge/Beetle

Medición de corrección automática

Open
#214 0 comments 0 reactions 1 assignee Claimed by @RodriKonrad View on GitHub
fase-9
Dominant language
Shell
Stars
1
Forks
0
PR merge metrics
No merged PRs in 30d

Description

## Qué es esta tarea

Medir la tasa de corrección automática exitosa del Modo 3 como métrica obligatoria (ya no condicional como en la v3.0). La meta es >85% de remediaciones exitosas.

## Qué se debe hacer

- Ejecutar los escenarios de prueba de la Fase 8 con el Modo 3 activo
- Para cada escenario, registrar:
- ¿El agente generó un plan de corrección?
- ¿El plan se ejecutó completamente?
- ¿La verificación post-corrección confirmó que el problema se resolvió?
- Calcular el porcentaje: remediaciones exitosas / incidentes donde se intentó corrección
- Agregar la columna "Corrección automática" a la matriz de resultados (tarea #206)
- Si la métrica está por debajo del 85%, iterar el prompt y la lista blanca

## Por qué importa

En la v3.0, esta métrica era condicional ("si sobra tiempo"). En la v4.0, el Modo 3 es alcance obligatorio y la métrica de >85% es un criterio de avance de la Fase 9 (roadmap). Es lo que valida que el diferenciador comercial del producto funciona en la práctica.

## Criterio de avance

Tasa de corrección automática >85% medida sobre los escenarios de prueba. La métrica aparece en la matriz de resultados junto a las demás métricas de la sección 16 del documento de proyecto.

Contributor guide

Open the contributing guide

Assessment

This issue has not been assessed yet.

Get new issues in your inbox

A short digest of beginner-friendly GitHub issues.