ProjectTech4DevAI / ProjectTech4DevAI/kaapi-frontend

Evaluation 2.0: Transition to v2 API

Abierto
#265 0 comentarios 0 reacciones 0 asignados Ver en GitHub

Nadie ha tomado este issue todavía.

enhancement
Lenguaje dominante
TypeScript
Estrellas
1
Forks
0
Merge medio
10 h 40 min
PR fusionados (30 d)
4

Descripción

Is your feature request related to a problem?
The console currently uses the v1 evaluation API, which lacks the features and speed of v2. The new v2 API offers significant improvements, including a better scoring system and additional functionalities that are not currently represented in the UI.

Describe the solution you'd like

  • Transition dataset upload, run trigger, and improve-prompt to the v2 endpoints
  • Update scoring UI to reflect the three judge metrics, verdicts, and overall summary
  • Introduce v2-specific controls: per-run duplication override and prompt-iteration loop

Guía de contribución

No hay ninguna guía de contribución indexada para este repositorio

Primeros pasos

  1. Lee el issue completo y luego la guía de contribución del proyecto.
  2. Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
  3. Haz un fork del repositorio y trabaja en una rama.
  4. Abre un pull request que haga referencia al número del issue.

Línea de trabajo

Empieza siguiendo los flujos actuales de v1 de la consola para la carga de datasets, el disparo de ejecuciones, improve-prompt y la UI de scoring. Compara cada flujo con el contrato de la API v2 y verifica después las tres métricas de judge, los veredictos, el resumen general, el override de duplicación y el bucle de iteración de prompts en la UI. Se considera terminado cuando todos los flujos enumerados utilizan el comportamiento de v2.

Escrito por el modelo de indexación a partir del texto del issue.

Evaluación

Stack tecnológico
typescript
Área
api, frontend
Tipo de issue
Nueva funcionalidad
Dificultad
5/5
Tiempo estimado
Más de una semana
Estado de actividad
Activo
Claridad
Bastante claro
Aptitud para principiantes
45/100

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.