ProjectTech4DevAI / ProjectTech4DevAI/kaapi-frontend

Evaluation: Fix judge run display

オープン
#272 コメント 0 件 リアクション 0 件 担当者 0 名 GitHub で見る

まだ誰も着手していません。

enhancement
主要言語
TypeScript
スター
1
フォーク
0
平均マージ
10時間 40分
マージ済み PR(30日)
4

説明

Is your feature request related to a problem?
v2 runs do not compute cosine similarity and do not interact with Langfuse. However, the run cards and detail view still display cosine columns and Langfuse trace links, which are empty or broken for judge runs.

Describe the solution you'd like

  • Implement a check for is_judge_run in EvalRunCard, EvalRunsList, and the run detail page
  • Remove cosine similarity summary and per-item cosine columns for judge runs
  • Hide Langfuse trace links for judge runs while retaining the native score_trace_url path
  • Keep the rendering path for v1 unchanged
Original issue

Is your feature request related to a problem?
v2 runs compute no cosine similarity and never touch Langfuse. The run cards and detail view still render cosine columns and Langfuse trace links, which will show up empty or broken for judge runs.

Describe the solution you'd like

  • Branch on is_judge_run in EvalRunCard, EvalRunsList and the run detail page
  • Hide cosine similarity summary and per-item cosine columns for judge runs
  • Hide Langfuse trace links for judge runs; keep the native score_trace_url path
  • Leave the v1 rendering path unchanged

Parent: #265

コントリビューションガイド

このリポジトリのコントリビューションガイドは索引されていません

はじめの一歩

  1. issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
  2. 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
  3. リポジトリをフォークし、ブランチを切って変更します。
  4. issue 番号を参照したプルリクエストを送ります。

調査の方向性

まず EvalRunCard、EvalRunsList、run の詳細ページを見つけ、is_judge_run と score_trace_url がそれらにどのように渡されているかを追跡します。Judge-Run の分岐を更新する前に、既存の v1 レンダリングパスを確認します。Judge-Run が cosine の概要、項目ごとの cosine 列、Langfuse リンクを非表示にしつつ、ネイティブな score_trace_url リンクを保持し、v1 の出力が変更されていなければ完了です。

索引モデルが issue の本文から書いたものです。

評価

技術スタック
typescript
領域
frontend
issue の種類
機能追加
難易度
3/5
見積もり時間
1〜2日
活発さ
活発
明瞭さ
明確に書かれている
初心者へのやさしさ
76/100

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。