huggingface / huggingface/diffusers
controlNet training for dstilled models
オープン
stale
- 主要言語
- Python
- スター
- 34.5k
- フォーク
- 7.3k
- 平均マージ
- 3日 3時間
- マージ済み PR(30日)
- 91
説明
Is it possible to train controlNet for distilled model (Block-removed Knowledge-distilled Stable Diffusion, https://github.com/Nota-NetsPresso/BK-SDM)?
When I used scripts in example folder for distilled model, it returns error, similar to "unknown mid_block_type ...." , probably because of unet structure changed. Are there any ways to train controlNet for distilled model?
コントリビューションガイド
調査の方向性
まず、exampleフォルダーのトレーニングスクリプトとBK-SDM蒸留モデルを使ってエラーを再現します。報告されている「unknown mid_block_type」失敗を、変更されたUNet構造と併せて確認し、そのうえでControlNetのトレーニングがこのモデルをサポートできるかどうかを判断します。完了の条件は、互換性の結果が文書化されていること、または動作するトレーニングパスがあることです。
索引モデルが issue の本文から書いたものです。
評価
- 技術スタック
- python, pytorch
- 領域
- machine-learning
- issue の種類
- 機能追加
- 難易度
- 5/5
- 見積もり時間
- 1週間以上
- 活発さ
- 停滞
- 明瞭さ
- 説明が足りない
- 初心者へのやさしさ
- 20/100