ProjectTech4DevAI / ProjectTech4DevAI/kaapi-frontend

Evaluation: Fix judge run display

Aperta
#272 0 commenti 0 reazioni 0 assegnatari Vedi su GitHub

Nessuno ha ancora preso questa issue.

enhancement
Lingua principale
TypeScript
Stelle
1
Fork
0
Merge medio
10h 40m
PR unite (30g)
4

Descrizione

Is your feature request related to a problem?
v2 runs do not compute cosine similarity and do not interact with Langfuse. However, the run cards and detail view still display cosine columns and Langfuse trace links, which are empty or broken for judge runs.

Describe the solution you'd like

  • Implement a check for is_judge_run in EvalRunCard, EvalRunsList, and the run detail page
  • Remove cosine similarity summary and per-item cosine columns for judge runs
  • Hide Langfuse trace links for judge runs while retaining the native score_trace_url path
  • Keep the rendering path for v1 unchanged
Original issue

Is your feature request related to a problem?
v2 runs compute no cosine similarity and never touch Langfuse. The run cards and detail view still render cosine columns and Langfuse trace links, which will show up empty or broken for judge runs.

Describe the solution you'd like

  • Branch on is_judge_run in EvalRunCard, EvalRunsList and the run detail page
  • Hide cosine similarity summary and per-item cosine columns for judge runs
  • Hide Langfuse trace links for judge runs; keep the native score_trace_url path
  • Leave the v1 rendering path unchanged

Parent: #265

Guida per i contributori

Nessuna guida per i contributori indicizzata per questo repository

Come iniziare

  1. Leggi tutta la issue e poi la guida ai contributi del progetto.
  2. Commenta sulla issue per dire che te ne occupi tu — evita che due persone facciano lo stesso lavoro.
  3. Fai un fork del repository e lavora su un branch.
  4. Apri una pull request che faccia riferimento al numero della issue.

Direzione di ricerca

Inizia individuando EvalRunCard, EvalRunsList e la pagina dei dettagli di un run, quindi traccia come vengono forniti loro is_judge_run e score_trace_url. Verifica il percorso di rendering v1 esistente prima di aggiornare i rami dei Judge-Runs. Il lavoro è completato quando i Judge-Runs nascondono i riepiloghi cosine, le colonne cosine per elemento e i link Langfuse, mantenendo al contempo i link nativi score_trace_url; l’output v1 rimane invariato.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
typescript
Ambito
frontend
Tipo di issue
Funzionalità
Difficoltà
3/5
Tempo stimato
1-2 giorni
Stato di attività
Attiva
Chiarezza
Specificata chiaramente
Idoneità per principianti
76/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.