ProjectTech4DevAI / ProjectTech4DevAI/kaapi-frontend

Evaluation 2.0: Transition to v2 API

Offen
#265 0 Kommentare 0 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen

Dieses Issue hat noch niemand übernommen.

enhancement
Vorherrschende Sprache
TypeScript
Sterne
1
Forks
0
Ø Merge
10 Std. 40 Min.
Gemergte PRs (30 T.)
4

Beschreibung

Is your feature request related to a problem?
The console currently uses the v1 evaluation API, which lacks the features and speed of v2. The new v2 API offers significant improvements, including a better scoring system and additional functionalities that are not currently represented in the UI.

Describe the solution you'd like

  • Transition dataset upload, run trigger, and improve-prompt to the v2 endpoints
  • Update scoring UI to reflect the three judge metrics, verdicts, and overall summary
  • Introduce v2-specific controls: per-run duplication override and prompt-iteration loop

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Erste Schritte

  1. Lies das ganze Issue und danach den Beitragsleitfaden des Projekts.
  2. Schreib ins Issue, dass du es übernimmst — das erspart doppelte Arbeit.
  3. Forke das Repository und arbeite in einem Branch.
  4. Öffne einen Pull Request, der die Issue-Nummer nennt.

Rechercherichtung

Beginne damit, die aktuellen v1-Pfade der Konsole für den Dataset-Upload, das Auslösen von Runs, improve-prompt und die Scoring-UI nachzuverfolgen. Vergleiche jeden Pfad mit dem v2-API-Vertrag und überprüfe anschließend die drei Judge-Metriken, Verdicts, die Gesamtzusammenfassung, das Duplication-Override und die Prompt-Iterationsschleife in der UI. Erledigt bedeutet, dass alle aufgeführten Flows v2-Verhalten verwenden.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
typescript
Bereich
api, frontend
Issue-Typ
Feature
Schwierigkeit
5/5
Geschätzter Aufwand
Über eine Woche
Aktivitätsstatus
Aktiv
Klarheit
Größtenteils klar
Anfängerfreundlichkeit
45/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.