huggingface / huggingface/diffusers
variable (per frame) IP Adapter weights in video
- Lingua principale
- Python
- Stelle
- 34.5k
- Fork
- 7.3k
- Merge medio
- 3g 3h
- PR unite (30g)
- 91
Descrizione
is there a (planned or existing) way to have variable IP Adapter weights for videos (e.g. with AnimateDiff)?
that means setting different values for different frames, as both scaling and masking currently seem to work with the whole generation at once (be it video or still image).
Guida per i contributori
Apri la guida per i contributori
Direzione di ricerca
The issue names no files, tests, or entry points; begin by checking the existing IP Adapter scaling and masking paths used with AnimateDiff video generation. Done would require determining whether per-frame weights are supported, or defining the implementation scope if they are not.
Scritto dal modello di indicizzazione a partire dal testo della issue.
Valutazione
- Stack tecnologico
- python, pytorch
- Ambito
- machine-learning
- Tipo di issue
- Funzionalità
- Difficoltà
- 5/5
- Tempo stimato
- Più di una settimana
- Stato di attività
- Ferma
- Chiarezza
- Da chiarire
- Idoneità per principianti
- 25/100