huggingface / huggingface/diffusers

Support for Multi-Image Input LoRA Training Pipeline for FLUX.2-Klein (e.g., Style Transfer and Multi-Subject Composition)

Offen
#13,008 2 Kommentare 2 Reaktionen 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
Python
Sterne
34.5k
Forks
7.3k
Ø Merge
3 T. 3 Std.
Gemergte PRs (30 T.)
91

Beschreibung

### Model/Pipeline/Scheduler description

I would like to request official support in Diffusers for a multi-image input LoRA training pipeline targeting the FLUX.2 Klein model. It seems that existing LoRA training pipelines are designed around single-image conditioning, which limits their applicability for tasks that naturally require multiple reference images. Clear guidance, reference implementations, or examples demonstrating how multi-image conditioning could be handled during training would be highly valuable. Thank you for your continued work on Diffusers, and I would greatly appreciate any insights, recommendations, or future plans related to supporting this capability.

### Open source status

- [ ] The model implementation is available.
- [ ] The model weights are available (Only relevant if addition is not a scheduler).

### Provide useful links for the implementation

_No response_

Beitragsleitfaden

Beitragsleitfaden öffnen

Rechercherichtung

Es werden keine Dateien oder Tests genannt. Beginne mit der Durchsicht der vorhandenen LoRA-Trainingspipelines von Diffusers sowie der Implementierung und der Gewichte des FLUX.2-Klein-Modells und vergleiche anschließend deren Single-Image-Conditioning mit den angeforderten Multi-Image-Fällen. Als abgeschlossen gilt die Aufgabe, wenn ein abgestimmter Implementierungsumfang sowie offizieller Support oder dokumentierte Referenzbeispiele für Style Transfer und Multi-Subject Composition vorliegen.

Vom Indexierungsmodell aus dem Issue-Text verfasst.

Bewertung

Tech-Stack
python, pytorch
Bereich
ai, machine-learning
Issue-Typ
Feature
Schwierigkeit
5/5
Geschätzter Aufwand
Über eine Woche
Aktivitätsstatus
Veraltet
Klarheit
Muss geklärt werden
Anfängerfreundlichkeit
25/100

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.