ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend

Evaluation: Add latency metric

Offen
#1,040 0 Kommentare 0 Reaktionen 1 zugewiesene Person Auf GitHub ansehen

@AkhileshNegi arbeitet bereits daran.

Seit 10.7.2026.

Vorherrschende Sprache
Python
Sterne
18
Forks
10
Ø Merge
2 T. 20 Std.
Gemergte PRs (30 T.)
14

Beschreibung

Is your feature request related to a problem?
We lack important metrics like latency for fast evaluations, which impacts decision-making processes. The absence of these metrics can lead to suboptimal choices.

Describe the solution you'd like

  • Add latency as a metric for fast evaluations
  • Note that cost metrics have already been added
Original issue
  • Latency as metric to add for Fast evals
  • Cost is already added

Beitragsleitfaden

Beitragsleitfaden öffnen

Erste Schritte

  1. Lies das ganze Issue und danach den Beitragsleitfaden des Projekts.
  2. Schreib ins Issue, dass du es übernimmst — das erspart doppelte Arbeit.
  3. Forke das Repository und arbeite in einem Branch.
  4. Öffne einen Pull Request, der die Issue-Nummer nennt.

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.