huggingface / huggingface/diffusers
controlNet training for dstilled models
- Lenguaje dominante
- Python
- Estrellas
- 34.5k
- Forks
- 7.3k
- Merge medio
- 3 d 3 h
- PR fusionados (30 d)
- 91
Descripción
Is it possible to train controlNet for distilled model (Block-removed Knowledge-distilled Stable Diffusion, https://github.com/Nota-NetsPresso/BK-SDM)?
When I used scripts in example folder for distilled model, it returns error, similar to "unknown mid_block_type ...." , probably because of unet structure changed. Are there any ways to train controlNet for distilled model?
Guía de contribución
Línea de trabajo
Empieza reproduciendo el error con los scripts de entrenamiento de la carpeta example y el modelo destilado BK-SDM. Lee el error notificado «unknown mid_block_type» junto con la estructura modificada de UNet y determina después si el entrenamiento de ControlNet puede admitir este modelo; se considera terminado cuando haya un resultado de compatibilidad documentado o una ruta de entrenamiento funcional.
Escrito por el modelo de indexación a partir del texto del issue.
Evaluación
- Stack tecnológico
- python, pytorch
- Área
- machine-learning
- Tipo de issue
- Nueva funcionalidad
- Dificultad
- 5/5
- Tiempo estimado
- Más de una semana
- Estado de actividad
- Estancado
- Claridad
- Necesita aclaración
- Aptitud para principiantes
- 20/100