ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend
Recommend automated metric for TTS evals
Ouverte
@rajagopalmotivate y travaille déjà.
Depuis le 17/2/2026.
research
- Langage dominant
- Python
- Étoiles
- 18
- Forks
- 10
- Merge moyen
- 2 j 20 h
- PR mergées (30 j)
- 14
Description
- We are going live with Human annotation as part of Subjective evals
- But along with that we need to have another 1-2 metrics that will get auto computed
- Basis few sample check from Raj's data, we could see Semantic similarity (Via LLM) was making sense besides WER
- But we need to finalise it after checking more data across languages.
ref: https://discord.com/channels/1014768296257654865/1463434906712670446/1471472813411012723
Guide de contribution
Ouvrir le guide de contribution
Par où commencer
- Lisez l'issue en entier, puis le guide de contribution du projet.
- Signalez en commentaire que vous la prenez — cela évite que deux personnes fassent le même travail.
- Forkez le dépôt et travaillez sur une branche.
- Ouvrez une pull request qui référence le numéro de l'issue.
Évaluation
Cette issue n'a pas encore été évaluée.