huggingface / huggingface/diffusers

Add Tortoise TTS as a pipeline

オープン
#3,891 コメント 16 件 リアクション 0 件 担当者 0 名 GitHub で見る
Good second issue New pipeline/model
主要言語
Python
スター
34.5k
フォーク
7.3k
平均マージ
3日 3時間
マージ済み PR(30日)
91

説明

### Model/Pipeline/Scheduler description

TorToise is a multi-voice text-to-speech system, which describes a way to apply recent advances in the image generative domain to speech synthesis. It would be great to have this model in diffusers.
I would love to contribute this.

### Open source status

- [X] The model implementation is available
- [X] The model weights are available (Only relevant if addition is not a scheduler).

### Provide useful links for the implementation

Paper - https://arxiv.org/pdf/2305.07243.pdf
Github repo - https://github.com/neonbjb/tortoise-tts

@sanchit-gandhi @Vaibhavs10

コントリビューションガイド

コントリビューションガイドを開く

調査の方向性

Start with the linked Tortoise TTS paper and the neonbjb/tortoise-tts implementation to understand the model and available weights, then compare them with existing Diffusers pipeline integrations. Done means Tortoise TTS is available as a supported pipeline in Diffusers, with its implementation and usage expectations documented.

索引モデルが issue の本文から書いたものです。

評価

技術スタック
python, pytorch
領域
audio-video-rtc, machine-learning
issue の種類
機能追加
難易度
5/5
見積もり時間
1週間以上
活発さ
停滞
明瞭さ
説明が足りない
初心者へのやさしさ
30/100

新しい issue をメールで受け取る

初心者向けの GitHub issue を短くまとめたダイジェスト。