K-Forge / K-Forge/Beetle

Iteración con escenarios

Open
#192 0 comments 0 reactions 1 assignee Claimed by @iCastro117 View on GitHub
fase-5
Dominant language
Shell
Stars
1
Forks
0
PR merge metrics
No merged PRs in 30d

Description

## Qué es esta tarea

Probar el prompt contra la evidencia guardada de cada escenario de prueba y ajustar la redacción iterativamente hasta que los informes sean precisos, comprensibles y consistentes.

## Qué se debe hacer

- Recolectar y guardar evidencia de al menos los 4 escenarios básicos: servicio caído, disco lleno, memoria agotada, puerto ocupado
- Ejecutar el prompt contra cada evidencia guardada
- Evaluar cada informe en:
- ¿Identifica la causa raíz correctamente?
- ¿Los pasos de solución resolverían el problema?
- ¿El lenguaje se entiende sin experiencia en sysadmin?
- ¿Marca correctamente los niveles de confianza?
- Ajustar redacción del prompt y re-ejecutar hasta que todos los escenarios produzcan informes aceptables
- Usar el modo caché (tarea #189) para iterar rápidamente

## Por qué importa

Un prompt que funciona para disco lleno puede fallar para cascada (múltiples causas correlacionadas). La iteración con escenarios reales es la única forma de validar que el prompt generaliza. Es la Fase 5 del roadmap — paralelizable desde la semana 3 con evidencia simulada.

## Criterio de avance

El prompt produce informes correctos para los 4 escenarios básicos y al menos 3 de los 5 realistas. Cada informe identifica la causa raíz y propone una solución viable.

Contributor guide

Open the contributing guide

Assessment

This issue has not been assessed yet.

Get new issues in your inbox

A short digest of beginner-friendly GitHub issues.