huggingface / huggingface/diffusers

Analysis of Classifier-Free Guidance Weight Schedulers

Abierto
#7,756 12 comentarios 4 reacciones 0 asignados Ver en GitHub
consider-for-modular-diffusers stale
Lenguaje dominante
Python
Estrellas
34.5k
Forks
7.3k
Merge medio
3 d 3 h
PR fusionados (30 d)
91

Descripción

### Model/Pipeline/Scheduler description

The paper's authors performs an analysis and proposes 1 line change in order to make Classifier-Free Guidance looks better
![cfg](https://github.com/huggingface/diffusers/assets/23548268/95e6801a-d734-4a50-bfbc-1d48a224f248)

I personally run some test to confirm

**SD1.5 DDIM scheduler, 50 steps, "a photograph of an astronaut riding a horse", seed: 1024**
guidance scale: 7.5
static
![sd_default](https://github.com/huggingface/diffusers/assets/23548268/884f5b8b-60fb-4b9d-b680-e6a3d6a047ab)

linear (proposed)
![sd_default_linear](https://github.com/huggingface/diffusers/assets/23548268/7d3e70b4-7483-4857-a99a-5dbd522efc94)

guidance scale: 14.0
static
![sd_org](https://github.com/huggingface/diffusers/assets/23548268/f3059e37-c333-4383-a261-7563fe0f1b14)

linear (proposed)
![sd_linear](https://github.com/huggingface/diffusers/assets/23548268/f0cad0e6-4e58-4c32-8394-cb588b6f95d0)

### Open source status

- [ ] The model implementation is available.
- [ ] The model weights are available (Only relevant if addition is not a scheduler).

### Provide useful links for the implementation

Paper: https://arxiv.org/abs/2404.13040

Guía de contribución

Abrir la guía de contribución

Línea de trabajo

Comienza con el paper enlazado e inspecciona el punto de entrada del scheduler DDIM; el issue no especifica ningún archivo ni prueba. Reproduce los experimentos de SD1.5 indicados y, después, establece el cambio exacto del scheduler y la validación necesaria para el comportamiento propuesto del peso de guidance.

Escrito por el modelo de indexación a partir del texto del issue.

Evaluación

Stack tecnológico
python, pytorch
Área
machine-learning
Tipo de issue
Nueva funcionalidad
Dificultad
5/5
Tiempo estimado
Más de una semana
Estado de actividad
Estancado
Claridad
Necesita aclaración
Aptitud para principiantes
25/100

Recibe los nuevos issues en tu correo

Un resumen breve de issues de GitHub para principiantes.