ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend

Recommend automated metric for TTS evals

Đang mở
#613 3 bình luận 0 reaction 1 người được giao Xem trên GitHub

@rajagopalmotivate đang làm issue này rồi.

Từ ngày 17/2/2026.

research
Ngôn ngữ chính
Python
Star
18
Fork
10
Merge trung bình
2 ngày 20 giờ
Pull request đã merge (30 ngày)
14

Mô tả

  • We are going live with Human annotation as part of Subjective evals
  • But along with that we need to have another 1-2 metrics that will get auto computed
  • Basis few sample check from Raj's data, we could see Semantic similarity (Via LLM) was making sense besides WER
  • But we need to finalise it after checking more data across languages.

ref: https://discord.com/channels/1014768296257654865/1463434906712670446/1471472813411012723

Hướng dẫn đóng góp

Mở hướng dẫn đóng góp

Bắt đầu từ đâu

  1. Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
  2. Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
  3. Fork repository và làm thay đổi trên một nhánh.
  4. Mở pull request có tham chiếu số hiệu của issue.

Đánh giá

Issue này chưa được đánh giá.

Nhận issue mới trong hộp thư của bạn

Bản tóm tắt ngắn những issue GitHub phù hợp với người mới.