ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend
Recommend automated metric for TTS evals
オープン
@rajagopalmotivate がすでに取り組んでいます。
2026年2月17日 から。
research
- 主要言語
- Python
- スター
- 18
- フォーク
- 10
- 平均マージ
- 2日 20時間
- マージ済み PR（30日）
- 14
説明
- We are going live with Human annotation as part of Subjective evals
- But along with that we need to have another 1-2 metrics that will get auto computed
- Basis few sample check from Raj's data, we could see Semantic similarity (Via LLM) was making sense besides WER
- But we need to finalise it after checking more data across languages.
ref: https://discord.com/channels/1014768296257654865/1463434906712670446/1471472813411012723
コントリビューションガイド
はじめの一歩
- issue を最後まで読み、次にプロジェクトのコントリビューションガイドを読みます。
- 着手することを issue にコメントします — 二人が同じ作業をするのを防げます。
- リポジトリをフォークし、ブランチを切って変更します。
- issue 番号を参照したプルリクエストを送ります。
評価
この issue はまだ評価されていません。