huggingface / huggingface/diffusers

Another comfy-ui compatible FLUX1.dev LoRA fails to load

Aperta
#10,954 13 commenti 0 reazioni 0 assegnatari Vedi su GitHub
bug lora stale
Lingua principale
Python
Stelle
34.5k
Fork
7.3k
Merge medio
3g 3h
PR unite (30g)
91

Descrizione

### Describe the bug

https://civitai.com/models/631986/xlabs-flux-realism-lora

This LoRA fails to load. Specifically, I get a `ValueError: Incompatible keys detected`.

### Reproduction

```py
import torch
from diffusers import FluxPipeline

pipe = FluxPipeline.from_pretrained("black-forest-labs/FLUX.1-dev", torch_dtype=torch.bfloat16).to('cuda')

pipe.load_lora_weights('/data/models/flux_realism_lora.safetensors', adapter_name="wow_details")

prompt = "a tiny astronaut hatching from an egg on the moon"
out = pipe(
prompt=prompt,
guidance_scale=3.5,
height=1024,
width=1024,
num_inference_steps=25,
).images[0]
out.save("image.png")
```

### Logs

```shell
ValueError: Incompatible keys detected
```

### System Info

Latest commit on main

### Who can help?

@sayakpaul

Guida per i contributori

Apri la guida per i contributori

Direzione di ricerca

Inizia eseguendo la riproduzione fornita di FluxPipeline con il LoRA collegato e ispeziona l’implementazione alla base di pipe.load_lora_weights, inclusa la relativa convalida delle chiavi incompatibili. Confronta le chiavi segnalate con la struttura FLUX LoRA prevista; il lavoro è completato quando il modello collegato viene caricato correttamente senza il ValueError e la pipeline può generare l’immagine di esempio.

Scritto dal modello di indicizzazione a partire dal testo della issue.

Valutazione

Stack tecnologico
python, pytorch
Ambito
machine-learning
Tipo di issue
Bug
Difficoltà
4/5
Tempo stimato
3-5 giorni
Stato di attività
Ferma
Chiarezza
Abbastanza chiara
Idoneità per principianti
35/100

Ricevi le nuove issue nella tua casella

Un breve riepilogo di issue GitHub adatte ai principianti.