huggingface / huggingface/diffusers

error in using EDMDPMSolverMultistepScheduler in kolors model

Ouverte
#8,997 1 commentaire 0 réactions 0 personnes assignées Voir sur GitHub
stale
Langage dominant
Python
Étoiles
34.5k
Forks
7.3k
Merge moyen
3 j 3 h
PR mergées (30 j)
91

Description

Hi
I want to change kolors default sampler ( euler ) to EDM according [link](https://huggingface.co/Kwai-Kolors/Kolors-diffusers) in below code but my result output image is noise.

```
from diffusers import KolorsPipeline,EDMDPMSolverMultistepScheduler
import torch
pipe = KolorsPipeline.from_pretrained(
"Kwai-Kolors/Kolors-diffusers",
torch_dtype=torch.float16,
variant="fp16",
use_safetensors = True
).to("cuda:3")

pipe.scheduler = EDMDPMSolverMultistepScheduler.from_config(pipe.scheduler.config)
prompt = 'a man'
image = pipe(
prompt=prompt,
negative_prompt="",
guidance_scale=5.0,
num_inference_steps=25,

).images[0]
image.save('result.png')
```

my terminal output :

![Screenshot from 2024-07-28 09-56-50](https://github.com/user-attachments/assets/529068fc-1ee6-4153-b758-aa29931b3605)

and final image :

![result](https://github.com/user-attachments/assets/15fff994-2f6f-49c7-8931-f356c012b631)

Thanks

Guide de contribution

Ouvrir le guide de contribution

Piste de recherche

Commencez par l'exemple de KolorsPipeline fourni et l'appel à EDMDPMSolverMultistepScheduler.from_config, puis exécutez la génération en 25 étapes pour reproduire la sortie bruitée. Comparez le résultat avec le scheduler par défaut de la pipeline et consultez les indications liées concernant le modèle Kolors-diffusers. Le travail est terminé lorsqu'il a été déterminé si la configuration du scheduler est compatible avec Kolors et que la sortie bruitée a été documentée ou corrigée.

Rédigé par le modèle d'indexation à partir du texte de l'issue.

Évaluation

Stack technique
python, pytorch
Domaine
machine-learning
Type d'issue
Bug
Difficulté
4/5
Temps estimé
3-5 jours
Activité
À l'abandon
Clarté
À clarifier
Accessibilité débutants
25/100

Recevez les nouvelles issues par e-mail

Un résumé court des issues GitHub adaptées aux débutants.