AlibabaResearch / AlibabaResearch/AdvancedLiterateMachinery

Where do I load pre-trained DiT and GiT in the VGT code?

Offen
#89 5 Kommentare 1 Reaktion 0 zugewiesene Personen Auf GitHub ansehen
Vorherrschende Sprache
C++
Sterne
1.8k
Forks
195
PR-Merge-Kennzahlen
Keine gemergten PRs in 30 T.

Beschreibung

I downloaded 2 weights for finetining VGT.

- [VGT-pretrain-model](https://github.com/AlibabaResearch/AdvancedLiterateMachinery/releases/download/v1.3.0-VGT-release/VGT_pretrain_model.pth) : it looks for pre-trained GiT
- [dit_base_patch16_224](https://github.com/microsoft/unilm/tree/master/dit) : it looks for ViT(DiT)

When finetuning VGT, Where should I specify the pre-trained ViT and DiT weight file paths?
If possible, please specify which file the 2 weight paths are loaded from.

Beitragsleitfaden

Für dieses Repository ist kein Beitragsleitfaden indexiert

Bewertung

Dieses Issue wurde noch nicht bewertet.

Neue Issues direkt in Ihr Postfach

Eine kurze Übersicht über anfängerfreundliche GitHub-Issues.