ProjectTech4DevAI / ProjectTech4DevAI/kaapi-backend

Recommend automated metric for TTS evals

未关闭
#613 3 条评论 0 个 reaction 已指派 1 人 在 GitHub 查看

@rajagopalmotivate 已经在做这个了。

开始于 2026年2月17日。

research
主要语言
Python
星标
18
派生
10
平均合并
2 天 20 小时
30 天内合并 PR
14

描述

  • We are going live with Human annotation as part of Subjective evals
  • But along with that we need to have another 1-2 metrics that will get auto computed
  • Basis few sample check from Raj's data, we could see Semantic similarity (Via LLM) was making sense besides WER
  • But we need to finalise it after checking more data across languages.

ref: https://discord.com/channels/1014768296257654865/1463434906712670446/1471472813411012723

贡献指南

打开贡献指南

从这里开始

  1. 先读完整个 Issue,再读项目的贡献指南。
  2. 在 Issue 下留言说明你要接手 —— 这能避免两个人做同样的事。
  3. Fork 仓库,在一个分支上完成修改。
  4. 提交 Pull Request,并在描述里引用这个 Issue 编号。

评估

这个 Issue 还没有评估数据。

把新 issue 发到你的邮箱

精选适合新手参与的 GitHub issue 摘要。