ProjectTech4DevAI / ProjectTech4DevAI/kaapi-frontend
Evaluation 2.0: Transition to v2 API
Nessuno ha ancora preso questa issue.
- Lingua principale
- TypeScript
- Stelle
- 1
- Fork
- 0
- Merge medio
- 10h 40m
- PR unite (30g)
- 4
Descrizione
Is your feature request related to a problem?
The console currently uses the v1 evaluation API, which lacks the features and speed of v2. The new v2 API offers significant improvements, including a better scoring system and additional functionalities that are not currently represented in the UI.
Describe the solution you'd like
- Transition dataset upload, run trigger, and improve-prompt to the v2 endpoints
- Update scoring UI to reflect the three judge metrics, verdicts, and overall summary
- Introduce v2-specific controls: per-run duplication override and prompt-iteration loop
Guida per i contributori
Nessuna guida per i contributori indicizzata per questo repository
Come iniziare
- Leggi tutta la issue e poi la guida ai contributi del progetto.
- Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
- Fai un fork del repository e lavora su un branch.
- Apri una pull request che faccia riferimento al numero della issue.
Direzione di ricerca
Inizia tracciando i percorsi v1 attuali della console per il caricamento dei dataset, l’avvio delle esecuzioni, improve-prompt e la UI di scoring. Confronta ogni percorso con il contratto dell’API v2, quindi verifica nella UI le tre metriche di judge, i verdetti, il riepilogo complessivo, l’override della duplicazione e il ciclo di iterazione dei prompt. Il lavoro è completato quando tutti i flussi elencati utilizzano il comportamento v2.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- typescript
- Ambito
- api, frontend
- Tipo di issue
- Funzionalità
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Stato di attività
- Attiva
- Chiarezza
- Abbastanza chiara
- Idoneità per principianti
- 45/100