ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend

Evaluation: STT Config

Đang mở
#595 0 bình luận 0 reaction 1 người được giao Xem trên GitHub

@Prajna1999 đang làm issue này rồi.

Từ ngày 9/2/2026.

Ngôn ngữ chính
Python
Star
18
Fork
10
Merge trung bình
2 ngày 20 giờ
Pull request đã merge (30 ngày)
14

Mô tả

Is your feature request related to a problem?

In the first cut of STT evaluation, runs are created with hardcoded parameters (run_name, dataset_id, models). There is no way to pass a standardized config, making it difficult to manage and reproduce evaluation runs with different configurations (e.g. model settings, evaluation parameters). Text evaluation already solves this with config_id + config_version.

Describe the solution you'd like

Add config support to STT evaluation, following the text evaluation pattern:

  • Accept config_id and config_version as input parameters in STTEvaluationRunCreate
  • Resolve the config blob using ConfigVersionCrud before starting the evaluation batch
  • Store config_id and config_version in the EvaluationRun record
  • Extract STT-specific parameters (models, evaluation settings, etc.) from the resolved config

Hướng dẫn đóng góp

Mở hướng dẫn đóng góp

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Đánh giá

Issue này chưa được đánh giá.

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.