huggingface / huggingface/diffusers

controlNet training for dstilled models

Abierto
#8,424 3 comentarios 0 reacciones 0 asignados Ver en GitHub
stale
Lenguaje dominante
Python
Estrellas
34.5k
Forks
7.3k
Merge medio
3 d 3 h
PR fusionados (30 d)
91

Descripción

Is it possible to train controlNet for distilled model (Block-removed Knowledge-distilled Stable Diffusion, https://github.com/Nota-NetsPresso/BK-SDM)?

When I used scripts in example folder for distilled model, it returns error, similar to "unknown mid_block_type ...." , probably because of unet structure changed. Are there any ways to train controlNet for distilled model?

Guía de contribución

Abrir la guía de contribución

Línea de trabajo

Empieza reproduciendo el error con los scripts de entrenamiento de la carpeta example y el modelo destilado BK-SDM. Lee el error notificado «unknown mid_block_type» junto con la estructura modificada de UNet y determina después si el entrenamiento de ControlNet puede admitir este modelo; se considera terminado cuando haya un resultado de compatibilidad documentado o una ruta de entrenamiento funcional.

Escrito por el modelo de indexación a partir del texto del issue.

Evaluación

Stack tecnológico
python, pytorch
Área
machine-learning
Tipo de issue
Nueva funcionalidad
Dificultad
5/5
Tiempo estimado
Más de una semana
Estado de actividad
Estancado
Claridad
Necesita aclaración
Aptitud para principiantes
20/100

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.