ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend
Recommend automated metric for TTS evals
Abierto
@rajagopalmotivate ya está trabajando en esto.
Desde el 17/2/2026.
research
- Lenguaje dominante
- Python
- Estrellas
- 18
- Forks
- 10
- Merge medio
- 2 d 20 h
- PR fusionados (30 d)
- 14
Descripción
- We are going live with Human annotation as part of Subjective evals
- But along with that we need to have another 1-2 metrics that will get auto computed
- Basis few sample check from Raj's data, we could see Semantic similarity (Via LLM) was making sense besides WER
- But we need to finalise it after checking more data across languages.
ref: https://discord.com/channels/1014768296257654865/1463434906712670446/1471472813411012723
Guía de contribución
Primeros pasos
- Lee el issue completo y luego la guía de contribución del proyecto.
- Comenta en el issue que vas a ocuparte — evita que dos personas hagan lo mismo.
- Haz un fork del repositorio y trabaja en una rama.
- Abre un pull request que haga referencia al número del issue.
Evaluación
Este issue todavía no se ha evaluado.